マイクロソフトはスマートフォンを複合現実に導入したいと考えている

スマートフォンが見えない状況は耐え難い、という人は少なくありません。食器を洗っている間もカウンターに置いたままにしたり、映画館で照明が落ちた後も使い続けたり、運転中に顔の前に置いたりするのです。ですから、マイクロソフトが新たな特許出願において、スマートフォンを未来の複合現実入力デバイスとして捉えているのは理にかなっています。

マイクロソフトは、MWCバルセロナ2019でHoloLens 2を発表した後の2月28日にこの特許を申請し、その後、米国特許商標庁（USPTO）によって公開されました。この特許は「Virtual Reality Input」とシンプルに名付けられており、マイクロソフトは、仮想現実（VR）／拡張現実（AR）／複合現実（MR）の世界でもスマートフォンを操作できるシステムについて説明しています。

同社は、ハンドヘルドコントローラーからジェスチャーベースの入力に至るまで、現在のインタラクション方法には限界があると説明した。また、多くの人にとって馴染みのない操作方法であるため、MR（複合現実）に快適に触れることがさらに難しくなっている。解決策は？人々が普段使い慣れているデバイス、つまりスマートフォンを使ってMR体験を楽しめるようにすることだ。マイクロソフトは次のように説明している。

いくつかの例では、タッチセンシティブ入力デバイスは、ユーザーにとって直感的で馴染みのある入力パラダイム（例えば、スマートフォンを日常的に繰り返し使用することで得られる）であるタッチ入力の受信を可能にする。タッチ入力やその他の種類の入力は、前述のハンドヘルドコントローラによって可能になる並進や回転といった入力の範囲を拡張することができる。入力デバイス自体も、使い慣れたインタラクションパラダイムを提供する場合があり、いくつかの例では、入力デバイスは、前述のように、ユーザーのスマートフォンやその他のモバイルデバイスである場合がある。

スマートフォンを見ずに操作できる人もいる――常に使っていることで各アプリアイコンの位置が記憶に刻み込まれているからだ――しかし、そうでない人もいる。（触覚や聴覚によるフィードバックだけでは、画面上で何が起こっているのかを正確に把握するのは難しい。）マイクロソフトもこうした限界について考え、さらに踏み込んだ対応をしたいと考えている。同社は次のように説明している。

さらに、仮想現実体験は、入力デバイスの機能を補完および／または拡張する可能性がある。以下でさらに詳しく説明するように、仮想現実体験は、入力デバイスを視覚的に示す表現をレンダリングするとともに、デバイスおよび仮想現実体験と対話するためのユーザーインターフェースも提供する可能性がある。いくつかの例では、ユーザーインターフェースは、入力デバイス自体によってレンダリングされるユーザーインターフェースに加えて、追加情報やインタラクションポイントを提供する可能性がある。

それは理にかなっています。VRへの没入感は、操作方法に慣れていないとなかなか得られません。ほとんどの人はスマートフォンに慣れています。そして、もし拡張現実が私たちの環境にあるものに基づいて構築するものだとしたら、スマートフォンは私たちの環境の中で最も不変のもの、つまり私たちの体とほぼ結びついています。マイクロソフトのシステムは、複合現実においてまさにこうした事実を受け入れているに過ぎません。