AIスタートアップの新ツールは、テキストプロンプトを必要とせずにビデオ映像用の音楽を作成します
カート・シュロッサー著
人工知能がコンテンツ制作に及ぼす影響は拡大の一途をたどっているが、別のスタートアップ企業もこれに新たな要素を加えた。今回は、ビデオを分析し、その映像に合わせた音楽を作成する機能だ。
GenreX（音楽ジャンルの略）は現在、シアトルのAI2インキュベーターでインキュベーションされています。共同創業者のYihao Chen氏とMalcom Yang氏は、サンフランシスコ・ベイエリアとシアトルに分かれて活動しています。
GenreXは、ビデオから音楽を作成する技術のベータ版のリリースを「画期的」かつクリエイティブプロセスにおける「大きな飛躍」と呼んでおり、同社のAI搭載ツールは、OpenAIのChatGPTや画像生成ツールMidjourneyなどの競合製品で必要なテキストプロンプトを必要としない。
GenreXのソフトウェアは、動画（例えば下のスキー映像）の様々な属性を分析し、その情報を用いて音楽ジェネレーターに指示を出し、数秒でオリジナルのサウンドトラックを作成します。もし音楽が合わない場合は、「再生成」ボタンを押すだけで新しいトラックを作成できます。このツールは同じ音楽を2度生成することはありません。
この技術は、特定のプロジェクトのための音楽の作成や選択に費やす時間を削減したいと考えている映画制作者や広告主など、あらゆる種類のコンテンツ制作者を対象としています。
「動画をアップロードして音楽を受け取るというプロセスを直接的に効率化したのは、私たちが初めてだと思います」とチェン氏は語った。「動画用の音楽のアイデアを得るといった類似の機能はいくつかあるかもしれませんが、現在構築中のエンドツーエンドのシステム全体は、他に類を見ないものだと考えています。」
これは、シアトルに拠点を置くスタートアップによる、音楽制作に人工知能を融合させる最新の取り組みです。Soundry AIなど、他の企業も生成型AIを音楽トラックの制作に活用しています。また、AI2 Incubatorのマネージングディレクターであるジェイコブ・コルカー氏は、OpenAIのDALL-E 2のテキストプロンプトを自身のバンドKing//Colkerのミュージックビデオ制作に活用しました。
「テクノロジーとアートが融合する世界において、GenreXのビデオから音楽を生み出すAIはイノベーションの証であり、クリエイターがこれまでにない精度とセンスで視覚的なストーリーを聴覚体験に変換できるようにします」とコルカー氏は述べた。
チェンはコーネル大学とジョージア工科大学で音楽とAI研究を学び、そのバックグラウンドを持っています。クラシックフルートの訓練を受け、ピアノも少し弾き、作曲、歌、ビートボックスもこなします。しかし最近は、テクノロジーと音楽に魅了されています。
「多くのミュージシャンの友人から、インスピレーションが湧かなくて困っているという話を聞いて、この会社を立ち上げました。音楽を作るのは、ミュージシャンにとっても大変なことです」と彼は語った。「ですから、AIやテクノロジー全般は、人間の創造性を後押しし、既存の音楽やクリエイティブな世界に付加価値を与えるものだと考えています。」
GenreXの音楽AIは、現在、スタンドアロンアプリとして無料でご利用いただけます。Adobe Expressのアドオンとしても利用可能で、近々Canvaでも利用可能になる予定です。このスタートアップは、クリエイターが既に制作している分野への参入を目指しています。
