Jukebox (ジュークボックス)とは
Jukeboxは、複数のジャンルやアーティストのスタイルで、音楽や素朴な歌を生成するオープンソースのニューラルネットワークツールです。
生成されたサンプルの探索ツールと共に、コードとモデルの重みをリリースしています。
Jukeboxを使えば、ユーザーはジャンル、アーティスト、歌詞に関する入力を提供し、ツールは新しい音楽サンプルを出力します。
Jukeboxは、幅広い音楽や歌唱スタイルを生成し、トレーニング中に見たことのない歌詞にも対応します。
ツールは、トレーニング中に見た歌詞に基づいて、トレーニングされた曲とは全く異なる音楽を生成することもできます。
Jukeboxを使用すると、ユーザーは12秒のオーディオを条件とし、指定されたスタイルで残りを補完することができます。
Jukeboxは、音楽を生のオーディオとして直接モデル化しており、生のオーディオシーケンスは非常に長いため、課題となっています。
この問題に対処するために、Jukeboxはオートエンコーダを使用して、生のオーディオを低次元空間に圧縮し、その圧縮空間でオーディオを生成し、生のオーディオ空間に再サンプリングしています。
Jukeboxは、生成モデルの限界に挑戦する例であり、ピアノロール形式で音楽を生成するツールよりも表現力があります。
AIによる生成された音楽を実験したいユーザーに適しています。
