本日29日(日)、美空ひばりがAIでよみがえる! NHKスペシャル「AIでよみがえる美空ひばり」が放送～「VOCALOID:AI」で歌声を再現し新曲ライブを実現
NHK総合で、2019年9月29日(日)21時から「NHKスペシャル AIでよみがえる美空ひばり」が放送されます。ヤマハが開発を進めている、深層学習技術(ディープラーニング)を使用した歌声合成技術「VOCALOID:AI」(ボーカロイド：エーアイ)を用いて、故人である美空ひばりさんの歌声を再現し、新曲ライブを実現するという取り組みです。なお、「VOCALOID:AI」の公開および実用化は今回が初とのことです。
NHKやレコード会社に残る、膨大な音源、映像を元に、最新のAI技術によって、美空ひばりさんを現代によみがえらせる試みで、その歌声は、なぜ日本人の心を揺さぶったのか？、これまで天才、オーラという曖昧な言葉でしか表すことができなかった美空ひばりさんの超人的な歌唱力や表現力を、AIはどう数値化し、どこまで再現できるのか…。
開発中の「#ＡＩひばり」に、アニメ映画「#アナ雪」の名曲の一節を試しに歌わせてみたところ。
— ＮＨＫスペシャル公式 (@nhk_n_sp)September 28, 2019
「ありの～ままの～」と歌うＡＩ。
あの独特の声やビブラートも再現されているような・・・
開発中とはいえ、かなりの完成度。
ＡＩの可能性とそら恐ろしさを感じる。https://t.co/hHrzdNk8Wspic.twitter.com/OLq0o13rrG
「AIひばり」のために新曲をプロデュースしたのは、生前最後の曲「川の流れのように」を手がけた秋元康氏。そして過去の膨大な映像を解析しながら、歌唱中の目や口の動きを抽出し、4K・3Dホログラム映像で等身大の美空ひばりさｎを出現させます。出演は秋元康氏、天童よしみさん、森英恵さん。
語りは、歌手の#三浦大知さん。
— ＮＨＫスペシャル公式 (@nhk_n_sp)September 29, 2019
祖母の影響で小さな頃からひばりさんの大ファンだった三浦さん。
AIにより、映像と神秘の歌声でよみがえったひばりさんの新曲コンサート映像を食い入るようにご覧になり「音楽の新しい可能性を感じた」そうです！
番組のラスト、５分間の奇跡のコンサート必見です！pic.twitter.com/n9TBswTO1p
ＡＩで再現した美空ひばりさん。秋元康さん作詞の新曲を歌います！
— ＮＨＫスペシャル公式 (@nhk_n_sp)September 29, 2019
秋元さんの名曲といえば、ひばり最後のシングル「川の流れのように」。
この仕事が大きな自信となったのだそう。今回も当時と同じ気持ちで取り組みたいと、「川の～」を作ったニューヨークで作詞！思い出のカフェの同じテーブルで！pic.twitter.com/XsitKpfqli
ヤマハは、新曲のボーカルパートと曲中のセリフパートを制作するという役割を担い、AI技術を用いた同社最新の歌声合成技術「VOCALOID:AI」を用いることで、美空ひばりさん本人の歌声や歌い方、話し声の特徴を忠実に反映したボーカルパートとセリフパートの双方の作成を実現したとのこと。
美空ひばりさん本人の生前の歌や話し声を収録した音源の背景には伴奏音が含まれていたものの、同社の「伴奏音除去技術」を用いて歌声部分のみを抽出することで質の高い学習データを生成し、高品質な合成を実現したとしています。
