MIT研究者、音を理解するAIの実用化を探る

音を聞く機械

機械学習で音源を分離
音楽家への演奏フィードバック
音声認識や音質改善

研究の応用

事故音から現場を特定
機器故障の兆候を検知
ビートルズ音源の修復に協力
詳細を読む

MITのパリス・スマラグディス教授は、機械が音を聞き分け、意味を理解する技術の研究を進めています。機械学習による音源分離や音声認識、音質改善を通じ、音楽制作の支援から事故や機器故障の検知まで幅広い応用を目指します。教授は、AIで音楽家を置き換えるのではなく、演奏や制作の道具を広げたいと話しています。

スマラグディス教授の研究室は、混ざった録音から個々の音を分離するニューラルネットワーク技術を開発しました。この技術はドキュメンタリー「The Beatles: Get Back」のアーカイブ音源の整理にも使われ、制作チームは2022年にエミー賞を受賞しました。

現在はMITで、音楽家に演奏への建設的な助言を返すシステムと、音を処理・分析する基礎技術の両方に取り組んでいます。サンプリングレートや処理区間を固定しない信号処理の手法を探り、より柔軟で効率的な仕組みを目指しています。

音を手掛かりにすれば、車の衝突音から事故の場所を推定したり、掘削機の異常音から故障を予測したりできる可能性があります。研究室は大規模言語モデルを音声認識や音質改善に取り込む方法も探っていますが、教授は音や音楽でのAI活用には、まだ最適な形が見つかっていないと述べています。