最近何かと話題なAIですが、私はその中でも「AIきりたん」について取り上げたいと思います。

AIきりたん

AIきりたんはニューラルネットワークの技術を用いたボーカロイドです。詳しくはこちらのページに書かれています。

ソフトウェアは無料で公開されており、誰でも入手できます。使用するためには Music Score というソフトで音符をつけていき、そのファイルを読み込ませることでボーカルボイスデータを出力します。あとはこのデータを楽曲と合わせれば曲として作ることができます。

何がすごいのか

まず、人間に近い声で違和感がないところです。ボカロ（例えば初音ミク）と言えば、伸ばす音で抑揚がないために音程が一定すぎてロボットっぽく聞こえてしまったり、高音域で独特のシャリシャリ音があったり、音程が変わるところで切れ目を感じたりとあります。これを解決するために調教師さんたちが頑張って人間の声に近づけていたわけです。

しかし、このAIきりたんは人間の手は必要なく、ニューラルネットワークを用いて最適なパラメータを割り当てるようです。残念ながらオープンソースではないのでどのような仕組みでチューニングされているのかまでは分かりません。

歌声を学習するの大変そう...

歌声の学習は結構難しいのではないかと思います。そもそも歌声は時間によって刻刻と変化します。これをそのまま扱うと膨大なデータになってしまいます。これをフーリエ変換して時間から周波数へと変換することで、複雑なデータを周波数成分ごとに分けることができます。加えて時間という連続データから周波数という離散データに変換できるので扱いやすくなりますね。これをどう扱うかがミソになりますが...。

入力データが周波数の数の分だけあり、その分ニューロンを用意したとすれば膨大な数ですね。ただ、すべての周波数成分をサンプリングする必要はなく、多少省いても人間の耳に違和感を感じなければ問題ないと思います。特に高音域は周波数が高いので間を省いても、別の周波数が一瞬にして通過すると考えれば違和感を感じる間もなく耳に入りますね。

公式サイトには「推定」と書いてあるのですが、これは歌詞を学習するときの手法で、元の声の部分は教師なし学習でクラスタリングしているのではないかと思います。もし教師あり学習だとすると音すべてをラベリングするのは大変そうですね...。

そんなことより体験して！

いろいろ語ってしまいましたが、とにかく聞いてみるのが一番です！
私の中で最も人間に近い歌い方をしているなと思ったのを選んでみました。

まずは夏祭りです。

www.youtube.com

そしてさくらんぼ。

www.youtube.com

どうですか？AIと言われないと人間が歌っているとしか思えないほどのクオリティですよね。

ボカロの歴史

ボカロと言えば「初音ミク」だと思います。実際、原点にして頂点ですからね...。

製作したのはヤマハです。当初は大学との共同研究でプロジェクトが進められており、日本で製品として発売されたのは2004年です。このとき発売されたのは初音ミクではなくMEIKOというボカロです。初音ミクは2007年に発売されました。

歌手ではなく機械に歌わせるということでオリジナルの歌詞、曲にのせることが可能となり、個人作曲者自身が歌わなくてよくなりました。ここから個人作曲者たちの活躍の場が広がります。例を挙げると米津玄師さんは元々「ハチ」という名前でボカロを使用した楽曲を動画にアップしていました。当時はニコニコ動画が全盛期でランキング上位はほぼボカロだったほどです。

ボカロの進化はさらに続き、何度も改良がなされ、現在では人間の声に近いほどになってきています。また、ライブをはじめ様々なイベントやグッズも登場し、キャラクターとしても人気が出ています。特に3Dホログラムのようなライブ演出は未来を思わせるほどのクオリティだと思います。

現在の「歌ってみた」や「踊ってみた」などの～してみた系はボカロから派生したといわれています。また、VTuberの3Dモデリングや音声変換ソフト、ボイスロイドなんかもボカロをもとにしているものがあるくらいです。それだけボカロが与えた影響は大きいのです。

そして、2020年の今、AIきりたんが新たなブームを巻き起こすと思います。例えば「歌ってみた」が「歌わせてみた」になり、「踊ってみた」が「踊らせてみた」となり、再び黄金時代を迎える可能性もあります。