XRの専門家は、ヘルスケアがVR、AR、MR…あるいは何と呼んでも構わないもののキラーアプリになると考えている。

仮想現実？拡張現実？それとも複合現実？今日シアトルで開催されたシンポジウムで、専門家たちはコンピューター生成の映像を目の前に表示するデバイスの総称として、拡張現実（XR）という用語を選定しました。そして、XRの最も有望な分野の一つとして、ヘルスケアを挙げました。

HTC Viveのプラットフォーム戦略および開発者コミュニティ担当副社長、Vinay Narayan氏は、ワシントン大学人間中心設計工学部が主催するイベント、XR Dayで「ヘルスケアがXRの大量導入を促進するだろうと確信している」と述べた。

なぜナラヤン氏はそう考えるのでしょうか？彼は、ヘルスケアアプリケーションはエンタープライズレベルのアプリケーションであることが多く、従業員が意思決定を行う際に大量のデータを扱わなければならない「高摩擦」環境にあると指摘しました。ヘルスケアはまた、すべての人に関わる産業であり、年間支出額は3.5兆ドルに上ります。

ナラヤン氏は、業務を効率化し、より良い成果をもたらすことができるXRのような技術にとって、これは魅力的な分野だと述べた。

彼は例として、HTC Vive の VR システムを使用して医学生に仮想現実の患者の手術方法を教えているカリフォルニア大学サンフランシスコ校を挙げた。

外科医がXRを用いて現実世界の患者を手術する日も近いかもしれません。例えば、マイクロソフトのHoloLensチームは、フィリップスと共同でAzurionと呼ばれる画像誘導治療プラットフォームを開発しています。この複合現実システムは、患者の生身の解剖学的構造と、X線画像と超音波画像を用いてコンピューターで生成されたモデルをマッチングさせ、外科医に医療処置のガイドを提供します。

食品医薬品局は、HoloLens ベースの医療システムを術前の外科手術計画に使用することを承認しており、また、腫瘍の治療手順を外科医に指導することを目的としたクリーブランドの臨床試験にも HoloLens が使用されています。

FDAは木曜日にワシントンDCで公開ワークショップを開催し、医療における仮想現実と拡張現実のベストプラクティスについて議論する予定だ。

「これは本当に興味深いものになると思います」とマイクロソフトの HoloLens チームのパートナー光学アーキテクトであるバーナード・クレス氏は語った。

クレス氏はGoogle X Labsに在籍中、2014年に発表されてセンセーション（と冷笑）を巻き起こしたカメラ付きスマートグラス、Google Glassの開発で主導的な役割を果たした。この冷笑により、Googleは最終的に一般向けGlassのプロトタイプを段階的に廃止せざるを得なくなったが、このグラスは企業向け製品として生き残っている。

クレス氏によると、スマートグラスやヘッドセットの光学系はそれ以来大きく進歩したという。現在開発中のイノベーションの一つに、ライトフィールド・スマートグラスがある。これは、ユーザーがXRシーンを視聴する際に、遠くから近くへと焦点を移動させることができる。「これは外科手術への応用において非常に重要だ」とクレス氏は述べた。

XRヘッドセットのか​​さばりを小さくし、装着者の目が他の人に見えるようにレンズを設計することは、手術室での応用において特に重要になります。「『なんてことだ！』という瞬間に、看護師とデータを共有するのは非常に困難です。…外科医の目が見えなければ、何かが欠けていることになります」とクレス氏は言います。

XR環境のデザインは、ゲームセンターではなく手術室に適したものへと微調整する必要がある。「デザイナーは、落ち着いた雰囲気で、スマートに背景に溶け込むシステムの構築に注力すべきだ」と、シアトルに拠点を置くProprioのバーチャルリアリティエンジニア、エヴィー・パウエル氏は述べた。

Proprioは、外科医の手術手順をガイドし、研修医やその他の観察者が外科医の肩越しに観察できるXRプラットフォームの開発に取り組んでいます。「外科医は術前計画を迅速かつ正確に統合し、手術全体をXRで行うことができます」とパウエル氏は述べています。

XR市場に登場してくる最も重要な技術は、おそらく視線追跡でしょう。これにより、真のハンズフリーインタラクションへの道が開かれます。「あらゆるヘッドセットにこの機能が搭載されるでしょう」とクレス氏は語りました。

ナラヤン氏も、視線追跡技術の重要性は手術だけに限ったことではないと同意した。例えば、「MLBホームランダービーVR」で仮想のボールをスイングしながらコントローラーを操作するのは想像しにくい。そこで彼の会社は、視線によるメニューナビゲーションとハンズフリー操作をゲームに追加する「Vive Pro Eye」を開発した。

「視線追跡機能を使えば、ユーザーはその場に留まり、実際にメニューを巡回し、視線を使ってアクションを起こすことができます」とナラヤン氏は語った。

同氏は、視線追跡によって、生体認証スキャン、本人確認、XR での銀行業務など、まったく新しいタイプのアプリケーションが実現するだろうと述べた。

5Gモバイル通信ネットワークの登場は、ワイヤレスXR体験をさらに向上させる可能性も秘めています。「真のARヘッドセットには、様々な技術が基盤として組み込まれています。優れたヘッドセットを開発するには課題があります」とナラヤン氏は述べました。「5Gによって、ネットワークの複雑さの一部を分離することが可能になります。」

XRデバイスの姿は、次の大きな技術の波が到来すれば大きく変わる可能性があります。そして、XR分野の企業が直面する最大の課題は、おそらくその波に乗るための適切なサーフボードを構築することです。「3年後に私たちが目にするであろうものが、今まさに開発されているのです」とナラヤン氏は語りました。