マイクロソフトのAI搭載iPhoneカメラアプリは、多方向パノラマ写真を撮影したり、動画を漫画に変換したりできるようになりました。
ナット・レヴィ著
マイクロソフトは、iOS 向けの AI 搭載写真アプリ Pix に 2 つのアップデートをリリースし、ユーザーがより大きく、より幅の広い写真を撮影したり、ビデオを漫画に変換したりできるようにしました。
今年初めに廃止された3Dパノラマ写真作成用のスタンドアロンアプリ「Photosynth」が、Pixに復活しました。スマートフォンを左右だけでなく上下、左右、斜めなどあらゆる方向に回転させることで、より広範囲なパノラマ写真を撮影できます。
マイクロソフトのAI&リサーチグループの主席プログラムマネージャー、ジョシュ・ワイスバーグ氏はブログ記事の中で、PixにPhotosynthを追加するというアイデアは、ワシントン州レドモンドにあるマイクロソフト本社からわずか数マイルのところにある主要観光名所、スノクォルミー滝で写真を撮ろうとしていたときに思いついたと述べた。
「シーンのどの部分を撮影するか選びたくなかったんです。細部まで全てを捉えたかったんです」とワイズバーグは語る。「Photosynthを使えば、もう選ぶ必要がなくなります。自然な感覚でシーン全体を撮影できるんです。」
もう一つの新機能「Pix Comix」は、動画を精査し、最高の瞬間を抽出して漫画に変換します。マイクロソフトのOneWeekハッカソンで開発されたPix Comixは、ディープラーニングを用いて、目を大きく見開いた顔、興味深いシーン、ぼやけていない瞬間などを探し出し、動画内の高品質な3フレームを識別します。
マイクロソフトは昨年、Pixをリリースしました。このアプリはiPhoneのネイティブカメラの使い勝手を向上させることを目指しており、当初は人物写真に特化していました。AIを活用して、ぼやけた写真や逆光の写真といったスマートフォンのカメラによくある問題を補正し、写真を安定させていました。
マイクロソフトは、書類、ホワイトボード、名刺の写真をより良く撮影できるようにするための9月のアップデートを含め、Pixに着実に新機能を追加してきた。
PixはMicrosoft Research部門から発足し、プロジェクトを研究室から市場へ投入することに重点を置くという動きの最新の例です。以前は基礎研究に重点を置いていましたが、CEOのサティア・ナデラ氏の下でその方針は転換しました。
この新しいアプローチのリスクは、研究者が数年後に成果をもたらす野心的なアイデアではなく、金儲けのプロジェクトに集中しすぎる可能性があることです。しかし、マイクロソフトの新しいモデルはFacebookやGoogleのアプローチとより一致しており、Skype TranslatorやHoloLensといった未来志向の新しい製品の誕生につながっています。
Pixは、Microsoftの新たなモバイルアプローチの一例でもあります。Microsoftは自社スマートフォンのラインアップを廃止した後、OutlookやBingといった主要サービスの最適化に取り組み、他のアプリやOSとの連携を強化し、カメラやキーボードといったスマートフォン本来の機能も向上させてきました。
