国立国楽院、スタートアップと提携して立ち上げ間近
韓国の伝統音楽は西洋音楽とは異なり、口承で受け継がれています。
出演者たちは3ヶ月間で約1,000曲を録音…「本物のプロの国楽音楽家が演奏しているような気分です」
均一なアンサンブル作品を 10 秒以内に作成します
人工知能（AI）を活用して韓国の伝統音楽（国楽）の裾野を広げる取り組みが進められている。写真は今年3月にAIで歌詞を復元した国立国楽院公演「ヘンガクとボヘオジャ」の一場面。 AIは350以上の漢詩を学習した後、歌詞がなくメロディだけが送信されていた「ボヘオジャ」の第3楽章に合わせて歌詞を生成した。国立国楽院提供。
「少なくとも 5 つの韓国の伝統楽器をフィーチャーした壮大なアンサンブル作品を作成してください。」
記者が最近、Googleの生成AI音楽作成プラットフォーム「MusicFX」にこのプロンプトを入力したところ、国楽というよりも日本の伝統的な劇場の歌舞伎のような音楽が生成された。日本の伝統的な太鼓「大鼓」の独特で活発な打楽器の音色が聞き慣れないリズムで奏でられ、そこに竹笛「笛」のような鋭い旋律が流れます。これはグローバルAIが「国楽」を正しく認識していないために起こった。
しかし、国立国楽院で開発の最終段階にある初の国楽専門生成AIに「加耶琴、大琴、ヘグム、ピリ、アジェン、ソリブク、コムンゴの7つの伝統楽器が一緒に演奏するオーディオトラックを作成してください」というプロンプトが与えられると、10秒も経たないうちに洗練された国楽のメロディーが鳴り始めた。 「コムンゴジャンダン（リズムパターン）を追加」を選択すると、既存のトラックに合わせたチョンジョンモリリズムのコムンゴ演奏が即座に追加されました。同センターの演奏者は、「単に『国楽の雰囲気』を模倣するだけでなく、まるでプロの国楽演奏者が実際に演奏しているかのように聞こえる点で驚くべきだ」と話した。
● 構築された機器ごとに 7,000 を超える構造化データ サンプル
国立国楽院は今年5月、国内AI音楽生成スタートアップNewTuneと提携し、国楽AIの開発に着手した。 AIが完成度の高い音楽を生み出すためには、各楽器の音色や奏法、表現される感情などの詳細なデータを学習する必要がある。問題は、西洋クラシック音楽とは異なり、国楽にはそのようなデータが存在しないことだった。 NewTuneの最高クリエイティブ責任者（CCO）であるPark Seung-soon氏は、「Googleのリアルタイム音楽生成AIモデルMagentaは、国際ピアノコンクールから約200時間のライブオーディオを確保し、それらの録音を構成する各コンポーネントの演奏データと組み合わせた」と説明した。国立国楽院学芸員兼研究員のホン・セア氏は、「国楽は主に口伝（口伝・暗記）で伝えられてきたが、出版された版や伝承の系譜によって表記が異なるため、AIが一貫して学習することが難しい」と述べた。
最終的に、国立国楽院の演奏家らは今年7月から3カ月間、1日8時間、1000曲以上のアンサンブル曲を学習データとして録音した。別々のレコーディングブースで同じ曲を個別に演奏、録音し、カヤグムやテグムなどの主要な楽器から、バラやウンラなどの比較的馴染みのない特殊な打楽器まで、24種類の楽器の7,000以上のマルチトラックデータサンプルを構築しました。収録されている音楽は、宗廟祭礼楽やヨミンラクなどの宮廷音楽、パンソリ「春香歌」や南方民謡などの民俗ジャンル、ファン・ビョンギ、キム・ギス、パク・ボムフンなどの作曲家による創作国楽など、著作権者から許可を得たものまで多岐にわたります。 AI がそこから学習できるように、ビート、ムード、楽器固有の特性などの核となる要素に関するメタデータがオーディオに追加されました。例えば邪神森のリズムは12/8拍子で入力され、「恨」の情緒性は「悲しみを芸術的に昇華した悲劇的な美しさ」として入力されています。
● 「国楽を歪めた既存AIの問題点を改善」
国楽生成AIが開発され、ユーザーに広く採用されれば、世界的な音楽制作プラットフォームで国楽が一般的な「東アジア風の音楽」として一括りにされる問題も部分的に解決されることが期待される。ホン氏は、「ヘグムの場合、現時点ではノンヒョン（弄絃、弦楽器の即興装飾音）がノイズとして認識され、AIによって除去され、中国の伝統的な弦楽器である二胡で演奏されているかのような音声が生成される」と述べた。
国楽生成AIは早ければ来年下半期にもオンライン公開される予定だ。 「まだ、楽譜に書かれていない微妙なシキムセ（音の前後の装飾音）や瞬間的な息づかいを生成することはできない」という声もあるが、開発が完了すれば、国楽と西洋音楽を組み合わせたクロスオーバー音楽の制作も可能になるものと期待される。国立国楽院は「韓国文化情報院と協力し、将来的にはカヤグムピョンチャン（カヤグムを弾きながら歌うこと）など音声分野にもAIを拡張する計画だ」と明らかにした。
ⓒドンアドットコム。無断転載を禁じます。転載、再配布、AI学習への使用を禁止します。
#国楽7000曲で訓練されたAIが漢を演じる