2023.08.26

TED要約:音楽を見る新しい方法（色と火を使って！）

marugotoyoten

ジャレッドフィクリンが「音楽を見る新しい方法（色と火を使って！）」について語りました。この動画の要点と要約をまとめました

スピーカー

ジャレッドフィクリン

専門分野:None
経歴:None

３つの要点

要点１
ルーベンスの管とフレームテーブルによる音の可視化が重要である。
要点２
曲の音の周波数を可視化することで、音楽を視覚的に楽しむことができる。
要点３
スケートパークからの音のデータを可視化することで、スケートパークのダイナミクスやトリックの影響力を理解することができる。

要約

ルーベンスの管とフレームテーブルによる音の可視化
私は音楽、テクノロジー、もの作りに情熱を注いでおり、音の可視化という趣味を探求しています。ルーベンスの管と呼ばれる8フィートの金属管をプロパンタンクに接続し、スピーカーを通じて異なる周波数の音を再生します。これにより、音がプロパンの燃焼に与える影響を観察し、可視化された波形を作り出すことができます。炎の高さは振幅を示しています。また、音の物理的な特性である固有モードを可視化するフレームテーブルも使用しています。これにより、より複雑な音の表現を提供し、ギタリストの演奏を観察するのに最適です。

曲の音の周波数を可視化する
技術のおかげで、音を目で見ることができるようになり、音をより鮮明に見ることができます。レンダリングアルゴリズムを使用して、曲の周波数を一つの視覚的な印象として描きました。これにより、視覚皮質のパターン認識能力が強調され、曲の音を見ることができます。アルバム全体を視覚的な印象として提示することで、音楽を聴かずに曲を楽しむことができます。このアイデアにより、視覚的な表現に基づいて曲を購入する可能性が広がります。

スケートパークからの音のデータを可視化する
テキサス州オースティンのスケートパークで、音のデータを収集しました。8つのマイクを使用してさまざまな障害物から音を収集し、これらの音を視覚的にレンダリングすることで、パターンや洞察を観察することができます。アルゴリズムは、トリックが成功するよりも失敗することが多いことや、レール上のトリックが歓声を生むことを明らかにします。さらに、スケートパーク内で占有される声の固有の周波数を特定することさえできます。このデータの可視化は、スケートパークのダイナミクスやトリックの影響力などを理解するのに役立ちます。

スティーブン・ホーキングのケンブリッジ講義シリーズの可視化
私はスティーブン・ホーキングのファンであり、彼のケンブリッジ講義シリーズに敬意を表したかったです。アルゴリズムを使用して、音声を視覚的にレンダリングし、各単語の振幅と抑揚をマッピングしてトレンドラインを作りました。さらに、星を3D空間に配置し、ユーザーがカスタムソフトウェアとKinectを使用して講義を探索できるようにしました。この没入型の体験により、ユーザーは星に触れて対応する文を聞くことができます。これはスティーブン・ホーキングへの敬意です。

▼今回の動画