MIT 音楽技術研究ショーケースが新大学院生たちの成果を祝う
MIT は音楽と工学の融合を推進する新大学院プログラム「MTC」の初年度学生による研究発表会を開催し、AI 共即興や脳波解析など革新的な音楽技術の実証を行った。
キーポイント
新プログラムの発足と連携体制
MIT は人文芸術学部(SHASS)と工学部(SoE)の協力により、2024 年秋に「音楽技術・計算大学院プログラム(MTC)」を設立し、2025 年に開館する新棟を活用して教育環境を整備した。
AI と人間の協働による即興演奏
発表会では、AI が共即興エージェントとしてピアノの次の音を予測・可視化する技術や、ダンスの動きから音楽を生成するシステムなど、人間と AI の創造的協働を示すプロジェクトが披露された。
脳波(EEG)を用いた音楽イメージング
聴覚皮質の活動や脳波信号(EEG)を解析して、人が頭の中で想像している楽曲を特定する技術など、神経科学と音楽技術の融合研究が紹介された。
学際的アプローチによる未来の表現
MIT の指導者は、単なる技術開発ではなく、AI 駆動の世界における「表現の未来」を形作るための学際的な協力と理論・応用の両面からの主導を強調した。
影響分析・編集コメントを表示
影響分析
このニュースは、MIT が音楽技術分野における学際的なリーダーシップを強化し、AI と人間の創造性を融合させる新たな研究パラダイムを確立しようとしていることを示しています。特に、脳波やダンス動作などの非伝統的な入力源を活用した音楽生成技術の進展は、今後 AI によるクリエイティブツールの進化に大きな影響を与える可能性があります。
編集コメント
MIT が掲げる「AI 駆動世界における表現の未来」というビジョンは、単なるツール開発を超え、芸術と科学の境界を再定義する野心的な試みです。特に脳波や身体動作を介した音楽生成技術は、今後のクリエイティブ AI の在り方を示唆する重要な指標と言えます。
2024 年秋に発足した MIT マーケティング・テクノロジー・アンド・コンピュテーション(MTC)大学院プログラムは、人文科学・芸術・社会科学部(SHASS)内の音楽・演劇部門と工学部(SoE)との協力体制のもと、5 月 13 日に初の MIT マーケティング・テクノロジー研究ショーケースを開催しました。このイベントはエドワード・ジョイス・リンデ音楽館のトマス・タルコンサートホールで満員御礼となり、多様かつ魅力的な研究発表と音楽パフォーマンスが披露されました。
祝賀行事には、MTC 初の 5 名の学生(全員が元 MIT 学部生)に加え、複数の博士課程学生や教員も参加しました。各研究者は、MIT の広がりつつある音楽技術シーン全体を反映した、芸術的なエンジニアリングの刺激的な模範事例を発表しました。
90 分間にわたるイベントでは、AI が共即興演奏するエージェントがピアノで次に何を奏そうとしているかのリアルタイム可視化、ノイズの多いネットワーク通信に基づくサウンドアート・インスタレーション、ダンスから音楽を生成するヒップホップダンスサークル、脳波(EEG)信号を用いて脳内で想像している楽曲を特定する技術など、幅広い研究プロジェクトが展示されました。
「探求と洞察のための新たな空間」
技術的なプレゼンテーションとライブパフォーマンスが織り交ぜられた本ショーケースは、SHASS学部長兼哲学教授のアグスティン・ラヨ氏、SOE学部長兼化学工学教授のポーラ・ハモンド氏、そしてMTCディレクター兼実践音楽教授のエラン・エゴジ氏の挨拶から始まりました。
ラヨ氏はまず、「このプログラムの目的はシンプルです。MITが音楽技術の理論と応用において世界をリードすることです」と述べ、「単にテクノロジーを使って音楽を作るだけでなく、AI 駆動の世界における表現の未来をより良く形作るために学際的な協働を行うことにもあります。それは同時に、最高の MIT を反映するものです」と付け加えました。
ラヨ氏は、この大学院プログラムが実現した背景の一つとして、2025年に開館したエドワード・ジョイス・リンデ音楽棟の存在を挙げました。同棟には新しい教室、スタジオ、練習スペース、そして専属の音楽技術ラボが設けられています。また、この大学院プログラムへの支援に対してMITシュワルツマン計算機学部にも謝意を表しました。
次にハモンド氏は、「この部屋にいる方々はご存知の通り、音楽と工学は共通する根拠を持っています。両者とも数学的な精密さを必要とし、定義された構造、リズム、周波数によって支えられています。また、全く新しい何かを創造するためには、努力と技術的ノウハウに加え、インスピレーションと想像力が不可欠です。これらの共通点があるからこそ、MITの教員、学生、スタッフの多くが優れた音楽家やアーティストでもあることは驚くべきことではありません。」と述べました。
彼女は続けて、「私たちの音楽プログラムは宝石のようなものです。MIT でなければ、トップの技術者とトップのミュージシャンを一堂に集め、協働のためのユニークな機会を生み出すことはできませんでした。ここでは、音楽とエンジニアリングの両方に強く共感する教員や学生を集め、新たな探求と洞察の場を形成しました。これは、研究所を定義する協働文化の強力な例です。」
エゴジー氏はこのイベントを「コンサートとシンポジウムの調和のとれたハイブリッド」と呼び、「わずか 1 年という短い期間で、学生たちがどれほど素晴らしい成果を上げているかを見ると、少し驚嘆させられます。当初は 1 年制と 2 年制の修士課程の間でのトレードオフについて議論しましたが、この cohort(修了生グループ)が、集中した期間の中で学習能力や研究能力において大きな飛躍を達成できることを示してくれました。」
展示された学生の研究成果
その一人が、脳波信号に隠された音楽の音符を特定するために機械学習モデルを開発したクレア・サザードさん('25 年卒、SM '26 年修了)です。
サウダーは説明します。「毎年、音楽家がパーキンソン病やジストニアなどの運動障害と診断されたり、楽器を演奏するために必要な方法で手や体を制御できなくなる怪我を負ったりしています。そのため、多くの音楽家が愛する活動を続けることを余儀なくされています。私の研究は、脳活動から演奏しようとしている音楽を直接変換することで、これらの音楽家たちが再び演奏できるようにするための一つの戦略を探求するものです。これを実現するために、EEG(脳波計)で測定した脳活動に基づいて、人が想像している音楽を予測する機械学習モデルを訓練しました。その結果、多くの予測された楽曲がユーザーの想像した内容の認識可能な表現であることが確認されました。身体能力に関係なく音楽家たちが音楽を創作できるシステムを設計することで、この研究が音楽パフォーマンスにおけるよりアクセスしやすい未来の実現に近づけることを願っています。」
MTC への参加以前、サウダードは同プログラムがさらに自身の関心を追求し実現するために提供できる可能性の広さ、範囲、規模についてほとんど知らなかった。「MIT の音楽技術・計算科学大学院プログラムは、STEM と芸術の交差点における可能性について私に多くのことを教えてくれました」と彼女は語る。「プログラムを始めた当初、正直なところ『音楽技術』とは何を指すのか確信が持てませんでした。授業や研究、教員やゲストスピーカー、そして仲間との対話を通じて、この分野が以前想像していたよりもはるかに広く、より魅力的であることに気づきました。」
彼女は続けてこう語る。「神経科学とコンピュータサイエンスのバックグラウンドを持つ私にとって、学部時代のプロジェクトの多くは完全にデバイス上で行われていました。しかし、このプログラムによって、音声録音の実施から電子楽器をゼロから構築するまで、より多くの実践的な経験を積むことができました。」
2026 年 SHASS 大学院修了式で学生スピーカーを務めたもう一人の MTC 卒業生であるマリアーノ・サルセド('25卒、SM '26)は、リアルタイムストリーミング音楽によって駆動される独自のエマージングビジュアルを誰でも作成できるカスタム Web アプリケーションを発表しました。この効果を実現するために、サルセドは自己組織化システムの複雑な視覚的振る舞いを活用するアルゴリズムを構築し、審美的に相乗的な結果を得る手段として利用しました。
上級学位授与式での演説において、サルセド氏は、MTC だけでなく MIT 全体で出会った情熱的な人々に対する感謝と敬意を表しました。彼はその場に適した共感的な姿勢で、「このような時代には、人間中心かつ人道的な技術の道を開くことが求められていると思います。つまり、私たちが何を作れるかだけを問うのではなく、誰に影響を与えるのか、誰に影響を与えないのか、誰が恩恵を受けるのかを問わなければならないのです」と述べました。
MIT における音楽技術の隆盛
MTA および電気工学・コンピュータサイエンス学部(EECS、SCC を通じて)の准教授であるアンナ・フアング氏(SM '08)は、MIT Media Lab の卒業生であり、協働型人間-AI 音楽制作における世界有数の研究者の一人です。彼女は基調講演「人間と AI の相互作用における共鳴を求めて」を通じて、サウスワード氏とサルセド氏の両者の見解に同調しました。その説得力があり、親密な対話形式の演説は、AI に関連するすべての活動において人間の音楽家を中心に据えることの重要性を強調すると同時に、あらゆる機会に世界のあらゆる音楽を議論に取り入れる努力を行うべきであるとも訴えました。
家族の多くが聴衆の中にいる中、黄氏は振り返って「MIT の音楽と電気工学・コンピュータ科学部(EECS)の両方に属する特権を有しています。これは学際的で共有された空間です。この文脈で音楽技術を構築することの意味は何でしょうか?私たちは極めて才能あるミュージシャンに囲まれているため、共同設計のアプローチを採用します。これらのミュージシャンと協力し、スタジオに入り、毎週何かを試みます。そして技術は創造的プロセスとともに成長していきます。私たちは常に両方を前進させようとし、それは常に最先端にあります。非常にやりがいがあり、私が最も居心地を感じる場所です。」
黄氏はまた、この実践が秋に新しく任命された演劇芸術学教授のグリシャ・コールマンと共同で教える新しい「音楽技術研究」科目の基盤となることを説明しました。クラス 21M.369/569(チューニング・アテンション:動き、音、AI における創造的実践)は、音と動きの実践の研究が、どのように計算システムを構築し、構想するかを教示する可能性があると提案しており、特に AI との関係性に焦点を当てています。この科目では、モーションキャプチャー技術、批判的インタラクションデザイン、生成モデル、および人間フィードバックを通じた解釈可能性と学習のためのアルゴリズムを通じて、即興やソマティクスにおける多様な音楽実践を学生に紹介します。
すべてを考慮すると、MIT の音楽技術・計算科学大学院プログラムの未来は明るいです。Egozy 氏によると、MTC は 2026-27 年度の入学生として 100 名を超える応募者から修士課程の学生 10 名を選抜しました。今年度のクラスとは異なり、来年度の学生には最新の MIT 学部卒業生だけでなく、キャンパスに初めて訪れる新顔も含まれます。
「他の学校や機関の卒業生を対象範囲を広げることで、プログラムに並外れた多様な視点と経験をもたらすことになります。さらに、MTA と EECS(電気工学・コンピュータ科学科)の間で共有されている 3 名の教員 — Mark Rau 氏、Paris Smaragdis SM '97, PhD '01 氏、そして Huang 氏 — は、EECS を通じて新しい音楽技術博士課程の学生を自らの研究室に招いています」と Egozy 氏は述べています。
その使命を体現し、MTC は多様なキャリア目標を持つさまざまな背景の学生を引きつける、活気ある学際的なプログラムであることを証明しています。
「多様性にもかかわらず、私たちの学生には一つの共通点があります」と Egozy 氏は言います。「音楽への愛を共有しているだけでなく、非常に温かく人道的な方法で、技術を通じてその情熱を高めるという深い欲求を持っています。」
プロジェクト一覧
Rachel Loh(音楽技術・計算科学クアンタフェロー):「ライブでの人間と AI の即興演奏のための音楽モデルの内部状態の可視化」*
Noble Harasha(音楽技術・計算科学クアンタフェロー):「フィードバック駆動型ネットワークにおける主観性と集合的知覚を、ノイズのあるアナログ通信としてモデル化する研究」*
Z Chen、音楽技術・計算科学クアンタフェロー:「社会的振付のための触媒としての生成音楽」
Nithya Shikarpur:「移動するドローン:ヒンドゥスターニー音楽の文脈における人間の声、生成モデル、ループを用いたライブ即興演奏」
Mariano Salcedo、Alex Rigopulos(1992 年)音楽技術・計算科学フェロー:「インタラクティブな音楽可視化のためのニューラルセルオートマトン」
Claire Southard、John Piscitello 音楽技術・計算科学フェロー:「想像された音楽の神経解読」
Stephen Brade、Suwan Kim、Valerie Chen:「クジラ、チェロ(そこにいる?):クジラの歌を学習したリアルタイム拡散モデルとチェロとの音楽的対話」
原文を表示
The MIT Music Technology and Computation (MTC) Graduate Program — launched in fall 2024 as a collaboration between the Music and Theater Arts Section in the School of Humanities, Arts, and Social Sciences (SHASS), and the School of Engineering (SoE) — presented its inaugural MIT Music Technology Research Showcase on May 13. The event played to a standing room-only house in the Edward and Joyce Linde Music Building’s Thomas Tull Concert Hall and featured diverse and captivating research presentations and music performances.
The celebratory occasion featured MTC’s first five enrollees (all of whom were previously MIT undergraduates), alongside several PhD students and faculty. Each scholar presented inspiring exemplars of artful engineering that reflected the broader and burgeoning music technology scene at MIT.
The 90-minute event exhibited a broad array of research projects, including a real-time visualization of what an AI co-improvising agent is about to play on a piano; a sound-art installation based on noisy network communication; a hip-hop dance circle where music is generated from dancing; and the use of electroencephalogram (EEG) signals to identify the musical tunes that our brains are imagining.
“A new space for exploration and insights”
An interplay of technical presentation with live performance, the showcase began with remarks from SHASS Dean and professor of philosophy Agustín Rayo, SOE Dean and professor of chemical engineering Paula Hammond, and MTC Director and professor of the practice of music Eran Egozy.
Rayo began, “The goal of this program is simple — for MIT to lead the world in music technology theory and application,” adding “it’s not just about making music with technology; it’s also about working across disciplines to help better shape the future of expression in an AI-driven world, all while reflecting MIT at its best.”
Rayo noted the graduate program was made possible in part by the opening of the Edward and Joyce Linde Music Building in 2025, which provided new classrooms, studios, rehearsal spaces, and a dedicated music technology lab. He also credited the MIT Schwarzman College of Computing for its support for the graduate program.
Hammond followed: “As those in this room already know, music and engineering share some common roots. Both rely on mathematical precision and are informed by defined structures, rhythms, and frequencies. Both demand hard work and technical know-how, paired with inspiration and imagination, to create something entirely new. Given those congruities, it’s no surprise that so many faculty, students, and staff members across MIT are also accomplished musicians and artists.”
She continued, “Our music program is a gem. Only at MIT could we bring the top technologists and the top musicians together to create unique opportunities for collaboration. Here we have brought together faculty and students who identify strongly with both music and engineering to form a new space for exploration and insights. It’s a strong example of the collaborative culture that defines the Institute.”
Egozy called the event a “harmonious hybrid of concert and symposium,” and recollected, “it’s a little mind-boggling to see what our students have achieved in just one short and fast-paced year. While we originally debated the trade-offs between a one-year and a two-year master’s program, I think this cohort really showed us that we can make huge strides in learning and research abilities in a concentrated period of time.”
Student research on display
One of those students is Claire Southard ’25, SM ’26, who developed a machine-learning model used to identify musical notes hidden in EEG signals.
Southard explains, “every year, musicians are diagnosed with movement disorders such as Parkinson’s disease and dystonia, or experience injuries that prevent them from controlling their hands and bodies in the ways required to play their instruments. Because of this, too many musicians are forced to stop doing what they love. My work explores one strategy to help such musicians perform again by translating the music they’re trying to play directly from their brain activity — bypassing the need for motor control altogether. To do this, I trained machine-learning models to predict the music a person is imagining from their brain activity measured using EEG, and many of the predicted pieces were found to be recognizable representations of what the user imagined. By designing a system that allows musicians to create music regardless of their physical abilities, I hope this work helps bring a more accessible future for music performance closer to reality.”
Before joining MTC, Southard was initially unaware of the breadth, scope, and magnitude of what the program could offer for further pursuing and realizing her interests. “The MIT Music Technology and Computation Graduate Program taught me so much about the possibilities at the intersection of STEM and the arts," she says. "When I first started the program, I honestly wasn’t sure what counted as ‘music technology.’ Through classes, research, and conversations with faculty, guest speakers, and peers, I learned the field was far broader and more fascinating than I could have previously imagined.”
She continues, “coming from a background in neuro- and computer science, many of my undergraduate projects happened entirely on devices. But this program allowed me to encounter more hands-on experiences, from conducting audio recordings to building electronic musical instruments from scratch.”
Another MTC graduate, and student speaker at the 2026 SHASS Advanced Degree Ceremony, Mariano Salcedo ’25, SM ’26, presented a custom web application allowing anyone to create unique emergent visuals that are driven by real-time streaming music. To accomplish this effect, Salcedo built algorithms that leverage the complex visual behavior of self-organized systems as the means toward an aesthetically synergetic end.
In his Advanced Degree Ceremony oration, Salcedo expressed his gratitude and admiration for the passionate people that he’s met not only in MTC, but at MIT overall. In an appropriately compassionate mode, he empathetically opined, “I think what times like this call from us is to lead the way in human and humane-centered technology, which means we don’t only just ask what we can build, but we also ask who is it going to affect, who is not going to affect? Who does it benefit?”
Music technology thriving at MIT
Associate Professor Anna Huang SM ’08 of MTA and the Department of Electrical Engineering and Computer Science (EECS, through SCC), a graduate of the MIT Media Lab, and one of the world’s leading researchers in collaborative human-AI music-making, echoed both Southard and Salcedo’s sentiments through her keynote presentation, “In Search of Resonance in Human-AI Interaction.” A compelling and intimately conversational address, her speech emphasized the importance of centering the human musician in all that is done relating to AI, while also making efforts to include all musics of the world in its discourse at every opportunity.
With many of her family members in the audience, Huang reflected, “I have the privilege of being in both MIT Music and EECS — an interdisciplinary, shared space. What does it mean to build music technology in this context? We’re surrounded by extremely talented musicians, so we take this co-design approach: We work with these musicians, we go into the studio, and every week we try something. And the technology grows with the creative process. We’re always trying to push both of these forward, and it’s always on the edge. It’s very, very rewarding. It’s where I feel most at home.”
Huang also explained how this practice sets the stage for a new Studies in Music Technology subject that she will be co-teaching in the fall with recently appointed Professor of Theater Arts Grisha Coleman. Class 21M.369/569 (Tuning Attention: Creative Practices in Movement, Sound, and AI) proposes that the study of sound and movement practices can inform how we build and envision computational systems, focusing particularly on our relationship to AIs. It will introduce students to a range of musical practices in improvisation and somatics by way of motion-capture technologies, critical interaction design, generative modeling, and algorithms for interpretability and learning through human feedback.
All considered, the future of the MIT Music Technology and Computation Graduate Program is bright. Egozy says MTC admitted 10 master’s students for the 2026-27 academic year from over 100 applicants. Unlike this year’s class, next year’s students will not only include recent MIT undergraduate alumni, but also new faces to campus.
“Widening the pool to graduates of other schools and institutions will bring an extraordinary wealth of perspectives and experiences to the program. Additionally, all three shared faculty between MTA and EECS — including Mark Rau, Paris Smaragdis SM ’97, PhD ’01, and Huang — are inviting new Music Technology PhD students to their labs by way of EECS,” Egozy says.
Embodying its mission, MTC is proving to be a vibrant, multidisciplinary program that attracts many kinds of students with a variety of career objectives from wide-ranging backgrounds.
“Despite their diversity, our students all possess a central commonality,” Egozy says, “not just a shared love for music, but also a deep desire to augment that passion by way of technology in a very warmhearted, humanitarian way.”
List of projects
Rachel Loh, Quanta Fellow in Music Technology and Computation: “Visualizing the Internal State of Music Models for Live Human-AI Improvisation”* *
Noble Harasha, Quanta Fellow in Music Technology and Computation: “Modeling Subjectivity and Collective Sensory Perception as Noisy, Analog Communication in Feedback-Driven Networks”* *
Z Chen, Quanta Fellow in Music Technology and Computation:* “*Generative Music as a Catalyst for Social Choreography”* *
Nithya Shikarpur: “The Moving Drone: A Live Improvisation in the Context of Hindustani Music with the Human Voice, Generative models, and Loops”
Mariano Salcedo, Alex Rigopulos (1992) Fellow in Music Technology and Computation:* *“Neural Cellular Automata for Interactive Music Visualization”
Claire Southard, John Piscitello Fellow in Music Technology and Computation: “Neural Decoding of Imagined Music”
Stephen Brade, Suwan Kim, Valerie Chen: “Whale, Cello (there?): A Musical Dialog between Cello and a Real-time Diffusion Model Trained on Whale Songs”* *
関連記事
今日のまとめ
AI日報で今日の重要ニュースをまとめ読み