
ワシントン大学の研究者による顔モデリングソフトウェアは、ブッシュ氏をオバマ氏、あるいはトム・ハンクス氏に変身させることができる
モリー・ブラウン著
ワシントン大学の研究者らは、インターネット上の写真をデジタル「ペルソナ」に変換し、その人物が実際には行っていない発言や行為を実行できる顔モデリングアルゴリズムを開発した。
このソフトウェアは、ジョージ・W・ブッシュの言葉を、例えばバラク・オバマやトム・ハンクスの口から読み上げることができる。また、亡くなった祖父母や遠くに住む友人など、愛する人の写真を撮影し、バーチャルな交流に十分なアバターを作成することもできる。
つまり、いつか、おばあちゃんが 1,000 マイルも離れたところに住んでいるとしても、ソファで本当の会話をすることができるようになるのです。
ワシントン大学の研究プロジェクトでは、機械学習アルゴリズムがインターネット上で入手可能な多数の画像から「ペルソナ」を捉え、よく撮影された人物のデジタル版を作成できることが示されています。
ワシントン大学の研究論文の主執筆者の一人で、コンピュータサイエンスとエンジニアリングの大学院生でもある Supasorn Suwajanakorn 氏が投稿した、興味深く不気味なビデオ (上記) では、ジョージ W. ブッシュ元大統領の質問に対する答えが、ヒラリー・クリントン、ダニエル・クレイグ、ニール・パトリック・ハリスなど他の著名人数名に転送されている様子が見られます。

「これは、ワシントン大学のコンピュータービジョン研究者が共有する壮大な目標、つまり家族の写真アルバムやビデオ、歴史的なコレクション、その他の既存のビジュアルから完全にインタラクティブな3次元のデジタルペルソナを作成するという目標に向けた一歩です」とワシントン大学のこの研究に関する投稿には記されている。
「仮想現実や拡張現実の技術が発展するにつれ、彼らは、単に2次元でスカイプするだけでなく、家族の写真やビデオを使って、海外に住む親戚や遠く離れた祖父母のインタラクティブなモデルを作成することを思い描いています。」
ワシントン大学の研究者たちは、おばあちゃんだけに留まろうとはしていません。この技術を使えば、「レブロン・ジェームズ、バラク・オバマ、チャーリー・チャップリン」など、直接会うことのできないほとんど誰とでも会話ができる可能性があると彼らは言います。
この技術は、3D顔再構成、追跡、位置合わせ、マルチテクスチャモデリング、そして人形操作の最新技術を活用しています。ワシントン大学のコンピュータサイエンス・エンジニアリング助教授であるイラ・ケメルマッハー=シュライザーマン氏が率いる研究グループによって5年かけて開発され、サムスン、グーグル、インテルからも資金提供を受けています。
UW グループは、12 月 16 日にチリで開催される国際コンピューター ビジョン会議で論文を発表する予定です。
スワジャナコーン氏がそのプロセスについて投稿したビデオ「トム・ハンクスをトム・ハンクスらしくする要素」を以下でご覧ください。
12月7日午後3時45分(太平洋標準時)の更新:私たちはSuwajanakorn氏とKemelmacher-Shlizerman氏に彼らの研究についていくつかの追加の質問をしました。彼らの電子メールでの回答は次のとおりです(文脈に合わせて編集されています)。
この技術の最初の応用は映画になると思われます。ゴラムのようなキャラクターの創造から、将来の映画に「若きトム・ハンクス」を登場させることまで、多岐にわたります。あなたはそう思いますか?
スワジャナコーン氏: 「はい。また、この転送・再構成技術は、ヘッドマウントディスプレイを装着した人の顔を合成したり、Siriのような仮想アシスタントシステムに「顔」を与えたり、音声のみで通信できる低帯域幅の通信用に自分の顔を合成したり、人物とそのペルソナ(例えば、話し方、動き方、やり取りの仕方など)をデジタル化したりするためにも活用できます。」
また、「フォトショップ」技術が新たなレベルにまで引き上げられる可能性もあるようです。例えば、オバマ大統領がイスラム教徒のテロリストであることを認めているかのように見せかけるマルウェアのような動画を作成するといったことが考えられます。こうしたアイデンティティに関する懸念について、考えたことはありますか?
スワジャナコーン氏: 「良い解決策は思いつきません。人々はビデオを慎重に扱うようになり、写真で行われてきたように、特定の「Photoshop」アーティファクトを分析する技術が開発されるかもしれません。」
ケメルマッハー・シュライザーマン氏: 「興味深い方向性としては、私たちの技術を使って偽の動画と本物の動画を識別することが挙げられます。」
GeekWire の Alan Boyle がこの記事に貢献しました。