みらいのアンサンブル Ensemble of the Future
By みらいのアンサンブル Follow | Public

デジタルコンテンツEXPO2017の会期中、ヤマハの人工知能合奏技術を用いて、テクノロジーが拡げる音楽コンテンツの新たな未来像を提示します。人間の演奏に人工知能合奏システムが追従しハーモニーを奏でるライブステージを実演します。

熟練した音楽家たちが織りなす美しい合奏。このような合奏では、演奏者はどのような音を奏でるかといった記憶をもとに、聞こえてくる音から音楽の進行を理解し、全体の調和をたもちながらも自己の表現を存分に展開してゆきます。一人一人がこの細やかな調節をしつづけることにより、タイミングがばらついたり、テンポからはずれたりといった破綻なく音楽が形作られていくのです。

この精緻な相互作用を計算機システム上で実現することに成功したのがヤマハの人工知能合奏技術です。信号処理技術により周囲の演奏音を精密にとらえ、音楽家の持つ優れた自己調整能力を数理モデル化した制御機構によって、担当する演奏を適切なテンポで進行させます。音のみならず、照明、コンピュータグラフィックス、事前に用意した映像など、さまざまなコンテンツを連携させることを可能にしています。

このヤマハの人工知能合奏技術を用いて、テクノロジーが拡げる音楽コンテンツの新たな未来像を提示します。デジタルコンテンツEXPO2017の会期中、日本科学未来館7階イノベーションホールにおいて、人間の演奏に人工知能合奏システムが追従しハーモニーを奏でるライブステージを実演します。ライブステージはピアノ連弾と金管アンサンブルの二演目。ピアノ連弾は、紅い流星、よみぃ等、ネットで活躍するピアノ演奏者を起用し、ライブ演奏と自動演奏ピアノとのバーチャル連弾を実演。また金管アンサンブルは、ユーフォニアム奏者の今村耀を招き、秋葉原区立すいそうがく団!とのバーチャル合奏で、二重奏曲・四重奏曲の演奏をお楽しみいただきます。

Music performance becomes immensely intimate and beautiful when many musicians simultaneously express themselves as a music ensemble. Ensemble performance is a result of not only self-expression but also mutual understanding, listening to each other to understand the ebb and flow of music, and expressing the the assigned notes within such a flow. Thus, for the ensemble to remain coherent, free of large jitter in the timing or deviation of the tempo, musicians must continuously make delicate adjustments based on such an auditory feedback. This kind of capability was difficult to realize on a computer system.

Yamaha has created AI Music Ensemble System, a computer system that allows a computer to make this kind of delicate adjustments.
It allows a machine to synchronize its playback to human music ensemble, by understanding the sound created by musicians with signal processing and machine learning, and controlling the playback with a mathematical model that expresses the kind of delicate adjustments humans make. The system allows a machine to synchronize to human music ensemble, not only sound but also lighting, computer graphics animation, slideshow and others.

We will present a mini-concert series that presents the possibility of music performance when machines are capable of playing intimately with humans in a music ensemble, using Yamaha's AI Music Ensemble System that allows machines to synchronize to human music performance. It will be held at the Innovation Hall (7th floor of the Mirakan) during the Digital Content EXPO 2017.
The live concert series will feature two programs: piano duet and brass ensemble. The piano duet concert will feature popular musicians on the internet such as "Akai Ryusei" and "Yomi," who will play with a machine-actuated grand piano.
The brass ensemble concert will feature euphonist Yoh Imamura, who will play brass duet and quartet in sync with a virtual music ensemble based on recordings of AKIBA WINDS.