當一個熟練的舞者表演時，音樂和動作會如此同步進行，以至於歌曲似乎是從表演者的身體中神奇地流淌出來的。然而，讓它發生的並不是魔法。
世界知名舞者Kaiji Moriyama在音樂會期間展示了一種可以將舞蹈動作轉換成鋼琴音樂的人工智慧系統。Yamaha 開發的“Dance to Piano Performance System”可以利用貼在舞者身上的四種感測器實時檢測動作。然後，人工智慧將這些動作轉換為音樂資料，並將其實時傳送到 Yamaha Disklavier 演奏鋼琴。
該技術如何運作？
該系統中使用的人工智慧 (AI) 仍在開發中，它可以透過評估來自附在舞者身體上的四種不同型別感測器的資訊來實時檢測舞者的動作。此外，該系統包含一個連線旋律和動作的原始資料庫。系統上的人工智慧使用這個資料庫從舞者的動作中實時生成適當的旋律資料。然後將 MIDI 資料傳送到 Yamaha Disklavier TM演奏鋼琴，然後轉換成音樂。
Yamaha Disklavier TM對於將舞蹈動作轉換為音樂表現力至關重要。它可以高精度地複製各種聲音，而鍵盤觸感只有很小的變化。此外，在音樂會上，雅馬哈採用了基於雅馬哈旗艦機型CFX音樂會三角鋼琴配置的定製Disklavier，將才華橫溢的舞者森山的表演充分、透徹地傳達出來。
雅馬哈的下一步是什麼？
雅馬哈最近推出了其首款綜合性 AI 鋼琴。Yamaha的AI 系統由 Disklavier 演奏鋼琴組成，由獨特的軟體控制，可以獨立思考。Yamaha 的工程師首先設定了讓系統以 Glenn Gould 的風格播放任何音樂的目標，以展示該技術。在格倫古爾德基金會的幫助下， 該專案被稱為“親愛的格倫”。
學習鋼琴家的演奏是第一步。使用深度學習技術（一種使用神經網路進行資料處理的數學建模工具）對古爾德 100 多個小時的錄音進行了分析。此外，雅馬哈還研究了許多其他鋼琴家的演奏，這些鋼琴家被認為是古爾德風格的代表。收集到所有資料後，人工智慧系統幾乎可以演奏任何鋼琴曲，就好像古爾德本人演奏的一樣。
另一方面，雅馬哈並沒有就此止步。他們還使用了專有的AI 音樂合奏技術（最早出現於 2016 年）。結果，該系統能夠與其他音樂家進行交流。這樣一來，AI 鋼琴家就有可能成為“真正的”樂隊成員。
