Dear Glenn 專案推出人工智慧系統,在 Ars Electronica 音樂節上重現傳奇鋼琴家 Glenn Gould 的演奏風格。

Yamaha Corporation 將推出全球第一個*1 以深度學習技術*2 為基礎的人工智慧 (AI) 鋼琴系統,該系統彈奏出類似已故傳奇鋼琴家 Glenn Gould 風格的任何音樂,並在 9 月 7 日,在奧地利林茨舉行全球最大的媒體藝術節之一 Ars Electronica Festival 的第三天,與合奏的演奏者互動。人工智慧 (AI) 系統將與今日幾名知名演奏者共同表演。還將進行與音樂和人工智慧展望相關的小組會議。該專案也被認為是慶祝日奧關係 150 週年的活動之一。

  1. Yamaha 推出全球首款人工智能系統,能夠以傳奇鋼琴家 Glenn Gould 的風格,演奏任何一首樂曲,並提供與人工智慧 (AI) 鋼琴演奏者和音樂演奏者間珍貴的互動體驗
  2. 人工智慧 (AI) 將與當代知名演奏者共同演奏,包括 Gould 以前從未出演的作品
  3. 討論將探討人工智慧 (AI) 與人類共同創造音樂及音樂表現的可能性

網站和影片製作於 9 月 4 日推出。

在 Glenn Gould 基金會的全力支持下,Yamaha 分析了超過 100 小時的 Gould 表演錄音,深入了解他的演奏風格,並根據收集的資料,採用深度學習算法,打造人工智慧系統。除了 Gould 的鋼琴錄音,人工智慧學習資料還包括多位鋼琴家的實際演奏,這些鋼琴演奏者推崇 Gould 且非常熟悉他的演奏風格,將聲音重現的品質提升到全新水準。

該系統還包括 Yamaha 原創的人工智慧 (AI) 音樂合奏技術,在與音樂演奏者互動的同時,近乎即時分析演奏者的演奏並進行預測性演奏。該系統不僅是一種自動化演奏,還重現 Glenn Gould 的精湛琴藝,帶給人工智慧 (AI) 鋼琴演奏者和音樂演奏者之間鼓舞人心的的共同創作互動體驗。

人工智慧 (AI) 系統將於音樂節第三天9 月 7 日星期六的研討會上公開,將在音樂演奏中透過人工智慧 (AI) 的使用,探索音樂的未來。研討會參與人員包括著名當代鋼琴家 Francesco Tristano、Glenn Gould 基金會的 Brian M. Levine 以及協助打造人工智慧 (AI) 系統的 Yamaha Corporation 開發人員 Akira Maezawa。

之後,人工智慧 (AI) 系統將在聖弗洛里安修道院,與知名現代演奏家進行第一次的公開演奏。演奏曲目包括與 Francesco Tristano 的鋼琴二重奏,以及與布魯克納管弦樂團林茨成員的管樂三重奏。演奏將包括 Glenn Gould 的代表性傑作--巴哈的哥德堡變奏曲 (BWV 988),以及巴哈來自《賦格藝術》的 Fuga inversa a 2 Clavicembali (BWV 1080/18) 和 G 大調三重奏奏鳴曲 (BWV 1038),後兩者皆非由 Gould 所演奏。由於人工智慧 (AI) 的學習資料中不包含這兩首樂曲,因此系統將挑戰在無模擬音源資料的狀況下演奏。

Glenn Gould 熱愛數位媒體錄音,並擅長重新思考演奏者與觀眾間的關係。專案名稱「Dear Glenn」乃是對藝術家態度的崇敬,有助於展現全新技術未來的可能性,也是該專案理念的靈感來源。藉由這個專案,Yamaha 希望透過音樂演奏者和現代人工智慧 (AI) 技術間的共創和相互啟發,為音樂演奏帶來新的可能性。

Yamaha Corporation 研發部資深總經理 Koichi Morita 的評論

在歷史和傳統所打造的樂器和音樂世界中,技術進步不斷更新和擴大音樂表達的可能性。一個主要的例子是鋼琴,由於工業革命的關係,即便成為現今廣為接受的樂器形式,仍不斷在進化。20 世紀資訊技術的發展不僅帶來鋼琴的硬體革命,也帶來軟體革命,包括人工智慧 (AI) 技術。從人類情感和敏銳性出發,Yamaha 相信人工智慧 (AI) 有可能突破音樂創造力的極限。我們期待今年 9 月在 Ars Electronica 音樂節上,向音樂愛好者展示和分享一些持續成果並探索未來新的可能性。

技術概要

人工智慧 (AI) 系統能夠以 Glenn Gould 的風格彈奏鋼琴,且只要有樂譜資料,就可現場演奏從未出演的樂曲。使用全球首創的深度學習技術,讓此壯舉得以實現。該系統由演奏者鋼琴和人工智慧 (AI) 軟體組成,可以立即產生 Glenn Gould 風格的演奏資料,然後提供這些資料給演奏者鋼琴。

圖 1:人工智慧 (AI) 學習歷程。除了依據 Glenn Gould 演奏錄音,分析其彈奏鋼琴的觸感和方式(步驟 1),人工智慧 (AI) 同時使用熟悉 Gould 彈奏方式的其他鋼琴演奏者的演奏資料,從可使用樂譜彈奏 Glenn Gould 風格的深層神經網路學習(步驟 2)。因此,人工智慧 (AI) 得以重現 Gould 式鋼琴彈奏風格,彈奏該演奏者從未錄製的樂曲(步驟 3)。

圖 2:Glenn Gould 人工智慧 (AI) 合奏時的運作方式。透過鏡頭和麥克風,進行彈奏者的即時分析,可在表演時讓 Glenn Gould 人工智慧 (AI) 與他們互動。

小組會議(發布人工智慧 (AI))

日期:

2019 年 9 月 7 日(週六)19:00 ~ 19:30

場地:

聖弗洛里安修道院(奧地利林茲)

主講者:

Francesco Tristano(鋼琴演奏家)、Brian M. Levine(Glenn Gould 基金會)、Norbert Trawoger(林茲布魯克納管弦樂團)、Akira Maezawa(Yamaha Corporation 研發部門)

主題:

鋼琴演奏家和人工智慧 (AI) 共同創造的可能性

演奏會

日期:

2019 年 9 月 7 日(週六)20:30 ~ 21:00

場地:

聖弗洛里安修道院(奧地利林茲)

共同彈奏者:

Francesco Tristano(鋼琴演奏家)、Norbert Trawoger(長笛;林茲布魯克納管弦樂團)、Maria Elisabeth Kostler(小提琴;林茲布魯克納管弦樂團)

樂曲:

巴哈哥德堡變奏曲 (BWV 988)、《賦格藝術》的 Fuga inversa a 2 Clavicembali (BWV 1080/18) 和 G 大調三重奏奏鳴曲 (BWV 1038)** 後兩者皆非由 Glenn Gould 所演奏。

Glenn Gould

1932 年於加拿大多倫多出生,是傳奇的鋼琴演奏家,於 1982 年去世,英年早逝,享年 50 歲。Gould 獲得許多非凡的讚譽,從他於 1956 年發行的首張專輯《巴哈:哥德堡變奏曲》開始,Gould便因其完美演奏巴哈的音樂而著名。1964 年,Gould 宣布隱退,並開始專注於錄製樂曲,致力於數位媒體發布。Gould 還以其非傳統和獨特的表演習慣而著名,包括坐在矮椅上、靠在鋼琴鍵盤上以及演奏時,甚至在錄音期間發出嗡嗡聲。晚期的 Gould 錄製三張專輯,包括使用 Yamaha 演奏會鋼琴錄製<巴哈:哥德堡變奏曲>。

Ars Electronica 音樂節

Ars Electronica 音樂節是以最新藝術、科技和科學為重點的音樂節,由位於奧地利林茨的媒體藝術研究所 Ars Electronica 舉辦。第一次於 1979 年舉辦,該音樂節自此成為全球規模最龐大的媒體藝術活動之一。音樂節期間,來自全球各地的專業人士匯聚於奧地利林茲舉辦展覽、表演、活動和國際會議的場地,討論並進一步深化關係。

Glenn Gould 基金會

Glenn Gould 基金會的使命是透過音樂的力量以及基金會的標誌性活動,包括 Glenn Gould 獎,表揚傑出作品、提升創造力並進而改善人類生命,同時紀念 Glenn Gould 的精神和傳奇。

相關新聞發表

・Yamaha 人工智慧 (AI) 與柏林愛樂樂團合作演出,重現重要鋼琴家 Sviatoslav Richter 的演奏

・Yamaha 人工智慧 (AI) 讓舞者變成鋼琴家

・Yamaha 人工智慧 (AI) 與人類演奏者共同演奏鋼琴雙重奏和管風琴合奏

・Yamaha 和 HAKUHODO i-Studio 在 SXSW 展示實驗性人工智慧 (AI) 音樂裝置

*1:根據2019 年 8 月 Yamaha Corporation 的內部調查。

*2:深度學習是一種機器學習方式,其特性在於多層使用稱為神經網路的數學模型,來處理資訊。