そんな中、音楽関連のAIツールを開発・販売する株式会社Qosmo(以下、コズモ)が「Video2Music」の提供を開始します。本製品は、深層学習型AIモデルで入力された動画を解析し、内容に合った音楽を瞬時にリストアップするというものです。AIが選曲作業を自動で行うため、制作時間を大幅に削減できます。
なお、Video2MusicはB2Bでの提供を目的としています。
動画をアップロードすれば数秒で候補曲を表示。選曲時間を大幅削減
BGMの選曲には、幅広い音楽の知識と感覚的な評価が必要です。そのため、ビデオディレクターやクリエイターたちはこれまで様々な人の意見を聞き、膨大な時間を費やしながら選曲してきました。Video2Musicであれば、動画をアップロードするだけで複数の選曲候補を探し出せます。検索すると数秒でマッチ度でランク付けされた候補曲がリストアップ。候補曲には類似性はあるものの、音楽ジャンルやテンポなどのばらつきが残されているため、最終的には制作者の好みでBGMを決定できます。
Video2Musicを活用できるシーン
Video2Musicは動画制作を効率化するだけでなく、コズモの音楽検索アルゴリズムをあわせて使うことで類似曲候補の提案といった幅広い検索サービスの構築を実現します。またAPI・オンプレ環境で実行できるほか、「ビデオ→音楽」に加え「音楽→ビデオ」の検索も可能なため、ユーザーエクスペリエンスを向上します。
コズモ独自のAIモデル
Video2Musicでは、時系列性のあるデータを解釈するのに優れた深層学習モデル「Transformer」を応用。動画と音楽という異なる種類の情報を比較可能な形に変換し、類似性を定量的に計算します。さらに追加のデータで再学習することで、それぞれのニーズに合わせた用途に特化した精度の向上も可能です。
PR TIMES
公式ホームページ
(文・杉本 旭)