ElevenLabsは10月26日、アップロードした動画に合わせてオリジナル楽曲と効果音を生成する「Instant Soundtracks」の提供を開始した。
同機能は、動画を解析して内容に合ったオリジナル楽曲を生成するほか、効果音が必要なシーンを検出し、各場面のタイミングに合わせた効果音も自動で作成する。広告の末尾でロゴが表示される場面に効果音を付けるといった用途を想定しているという。
動画をアップロードすると、オリジナル楽曲とシーンに応じた効果音を同時に生成できる。短尺動画のテンポに合わせて、楽曲のタイミングも最適化する。
また、シーンの雰囲気に応じて楽曲のムードを変更できるほか、動画内の既存音声に含まれるジャンルやBPM、使用楽器などを参照し、その特徴に合った楽曲を生成することにも対応する。
ElevenLabsによると、Instant SoundtracksはElevenCreative、ElevenMusic、ElevenAPIで利用できるという。
著者について
Chi-gyu Hwang
delight@d-today.co.kr