ダンスの脳内表現に生成AIで迫る~音楽・身体・感情にかかわる脳応答を包括的モデル化~

2025-11-19 東京大学

東京大学大学院人文社会系研究科の 今水 寛 教授らの研究グループは、ダンス映像の視聴中に記録したfMRI脳活動データと、音楽と身体運動を統合するクロスモーダル特徴を抽出する深層生成モデルを用して、ダンスが人間の脳内でどのように表現・処理されるかを定量的に解析しました(研究論文: Cross‑modal deep generative models reveal the cortical representation of dancing)。研究では、ダンス映像を視聴する14名(熟達ダンサー含む)の脳活動をもとに“音響+運動”を統合した特徴量が、従来の運動・音響特徴単体よりも脳応答をよく説明することを発見しました。また、鑑賞中に喚起される「美しさ」「躍動感」など数十項目の感情表現をモデル化し、それぞれの感情に応じた異なる神経ネットワークパターンが存在することを明らかにしています。さらに、熟達ダンサーは未経験者に比べてより広範な脳部位でダンス情報を処理している一方、個人差も大きいという定量データも得られました。これらの成果は、神経美学・芸術科学、ダンス教育・創造的AIインタラクション設計などの基盤知見となるものです。

ダンスの脳内表現に生成AIで迫る~音楽・身体・感情にかかわる脳応答を包括的モデル化~
ヒトと生成AIのダンスに対する情報処理を、世界で初めて定量的に比較

<関連情報>

クロスモーダル深層生成モデルはダンスの皮質表現を明らかにする Cross-modal deep generative models reveal the cortical representation of dancing

Yu Takagi,Daichi Shimizu,Mina Wakabayashi,Ryu Ohata & Hiroshi Imamizu
Nature Communications  Published:18 November 2025
DOI:https://doi.org/10.1038/s41467-025-65039-w

Abstract

Dance is an ancient, holistic art form practiced worldwide throughout human history. Although it offers a window into cognition, emotion, and cross‑modal processing, fine‑grained quantitative accounts of how its diverse information is represented in the brain have rarely been performed. Here, we relate features from a cross‑modal deep generative model of dance to functional magnetic resonance imaging responses while participants watched naturalistic dance clips. We demonstrate that cross-modal features explain dance‑evoked brain activity better than low‑level motion and audio features. Using encoding models as in silico simulators, we quantify how dances that elicit different emotions yield distinct neural patterns. While expert dancers’ brain activity is more broadly explained by dance features than that of novices, experts exhibit greater individual variability. Our approach links cross-modal representations from generative models to naturalistic neuroimaging, clarifying how motion, music, and expertise jointly shape aesthetic and emotional experience.

1600情報工学一般
ad
ad
Follow
ad
タイトルとURLをコピーしました