Mudra Inspire リストバンドは神経インパルスを VR と AR アクションに変換します

画像

1

の

5

実践

手首に装着したものが本当に手のジェスチャーを読み取りできるなんて、本当に信じられないと思いませんか？私もそうでした。しかし、Mudra Inspireが私の手首と、ウェアラブルデバイスのCEO兼共同創設者であるアッシャー・ダーハン氏の手首で実際に動作しているのを見て、その同期の速さに驚きました。私が体験したアプリはすべて概念実証（PoC）でした。まだ一般向けアプリはリリースされていませんが、どれも実際のゲームで使用されている動作を模倣し、ほぼ完璧に動作しました。

数分かかるので完全なキャリブレーションは行いませんでしたが、かなり簡単そうです。ペアリングデバイス（今回はAndroidスマートフォン）にダウンロードしたMudraアプリで、バンドをしっかりと締めます。指を動かした時のデバイスの反応を確認できます。キャリブレーションアプリには、心拍計のような曲がりくねった線が表示され、指の動きに応じて高さが変わります。

Mudra Inspireは、指の圧力も検知できます。キャリブレーションは、人差し指または中指と親指を握ってアプリ上のチューブを色で満たすことで行われます。強く握るほど、チューブの色が濃くなります。私は前述の指のキャリブレーションとこの圧力キャリブレーションの両方を行いましたが、完全なキャリブレーションに必要な時間はすべて行いませんでした。

Androidスマートフォンをテレビに出力してプレイしたあるゲームで、ダハン氏がプラスチック製のドーナツが積み重なったゲーム内のポールにアクセスしようと手を左に動かすと、カーソルが正確に動くのを確認しました。彼が手を下ろすと、カーソルも下がりました。人差し指と親指を握ると、ダハン氏の仮想の手はドーナツを拾い上げました。握ったまま手を右に動かし、カーソルがゲーム画面の右側にあるポールに届くようにしました。ダハン氏が人差し指と親指の間の力を緩めると、仮想の手も同時に動き、ドーナツは別のポールに落ちました。

Mudra InspireはZ軸周りでも動作します。Dahan氏はVR内で、上のドーナツの例のように箱を持ち上げ、人差し指と親指を強く握って画面に近づけ、その後、人差し指と親指を離して落としました。

このウェアラブルデバイスは、驚くほど多様な操作性も備えています。MSペイントのようなデモでは、Mudra Inspireが非常に具体的な入力に対応していることが示されました。Dahan氏は、私がマウスを使ってペイントで描いたものと遜色ないほど美しい顔をバーチャルエアブラシで描き出しました。人差し指と親指を合わせ、力を入れるほど線が太くなり、手首を動かすことで、画面上のキャンバスにバーチャルペイントを描きました。色の切り替えは、カーソルを画面下部に移動して人差し指でタップするだけで簡単に行えます。

Mudra Inspireの指圧精度をテストするため、AndroidスマートフォンでARコースターを操作してみました。同社のPoCアプリでは、人差し指と親指を一緒に握るとコースターから炎が噴き出す様子が映し出されていました。

圧力が高ければ高いほど炎は上がり、指を握るのをやめるまで火は消えませんでした。この時、Mudra Inspireは少し動揺し、手を休めているにもかかわらず、私が少し圧力をかけていると認識してしまいました。しかし、前述の通り、私は完全なキャリブレーションを行っていませんでした。Dahanの完全にキャリブレーションされたバンドでは非常にうまく動作したので、もう少し時間をかけてキャリブレーションしていれば、私の場合はもっとうまく動作したかもしれません。

VR/AR リストバンド ウェアラブルはどのように機能しますか?

Mudra Inspireは、消しゴムほどの大きさのハードウェアで、付属のリストバンド、またはお好みのバンドに装着します。現在、開発者向けに246.50ドルで販売されており、この価格ではMudra Inspire本体、Mudraロゴ入りストラップ、接続・充電用のMicro-USBケーブル、ユーザーガイドが付属します。Wearable Devicesは、Mudra Inspireに対応するアプリやゲームがリリースされ次第、2019年半ばまでに一般公開する予定です。その時点で価格は大幅に下がる見込みです。

Mudra Inspireは、3つの特許取得済み表面神経伝導（SNC）センサーと電極を用いて、手首の尺骨神経束、正中神経束、橈骨神経束から生体信号を読み取ります。デバイスはデジタル演算を行い、Bluetooth経由でサポートデバイスにリアルタイムで送信します。次に、ペアリングされたデバイスは、オープンソースソフトウェアTensorFlowを用いたニューラルネットワークアルゴリズムを実行します。1つは信号検出（手指の動き）用、もう1つは動きを仮想動作に分類するためのものです。

これにより、手がコントローラーとなり、指がボタンになります。キャリブレーション後、スクロール、スワイプ、選択、スタート、ドラッグ＆ドロップ、回転、反転など、様々な機能を手、指、腕のジェスチャーに割り当てることができます。さらに、人工知能（AI）を搭載したMudra Inspireは、使用すればするほど精度が向上し、Wearable Devicesによると、最大99.9%の精度を実現しています。

現時点では、Mudra Inspire は一度に 1 つしか装着できませんが、同社は将来的に 2 つのデバイスをサポートし、両方の手の動きを VR と AR の世界に取り入れられるよう取り組んでいるとのことです。

アプリはまだありません

現在、Mudra Inspireをサポートする一般向けアプリは存在しません。しかし、このウェアラブルデバイスは、HTC Vive、HoloLens、GoogleのCardboard VRビューアー、META 2 ARヘッドセット、Androidスマートフォン、AndroidスマートウォッチのWear OS向けのユースケース開発に既に複数の主要開発パートナーと取り組んでいます。

Mudra Inspireは、2018年末までにWindowsサポート、2019年初頭にiOSサポートを取得する予定です。今後の開発パートナーとしては、Oculus、GoogleのDaydream VRおよびARCore AR開発プラットフォーム、PlayStation VR、Magic Leap、Nintendo、Apple TVが挙げられていますが、開発日程はまだ公表されていません。

コントローラーよりも優れていますか?

VR愛好家の間では、最近のVRコントローラーに対する不満が相次いでおり、これがウェアラブルデバイスがMudra Inspireによって手、あるいは手首に負担をかける一因となっているのかもしれません。そして、Mudra Inspireは、従来のコントローラーが抱える大きな問題を回避しているようです。

コントローラーの欠点の一つは視野角の制限ですが、Mudra Inspireにはそのような制限はありません。コントローラーの中には人間工学に基づいたデザインに欠け、扱いにくいものもあります。Viveコントローラーのボタンレイアウトは直感性に欠け、Steamメニューボタンを親指で誤って押してしまうことが多いという不満の声もあります。

一方、Oculus Touchコントローラーは充電式バッテリーを搭載しておらず、単三電池はすぐに消耗してしまいます。さらに、硬いプラスチックを何時間も握り続けると、手根管症候群のような症状が出ることがあります。短期的には筋肉のけいれんを引き起こす可能性がありますが、長期的には実際に手根管症候群を引き起こす可能性があります。

とはいえ、ウェアラブルデバイスのリストバンドは、新規顧客をXRブームに飛び込ませる「きっかけ」となるでしょうか？ それだけでは無理です。Mudra Inspireは、価格、ハードウェアや設置面積の要件、コスト、そして普及率の低さなど、他のXR製品と同様の参入障壁に直面しています。

しかし、Mudra Inspireが人気アプリでサポートされれば、より直感的な操作とリアルな体験を求めるVRファンを魅了するでしょう。楽しいARアプリがいかに急速に普及するかは既に見てきました。この目立たないウェアラブルが、特にスマートウォッチやスマートフォンと組み合わせることで、どれほどの熱狂をもたらすか想像してみてください。

しかし、特にVRではコントローラーが鍵となります。物理的な何かに触れることで、例えば指で狙って撃つふりをするよりも、よりリアルな感覚が得られます。ゲームによっては、実際に押せるボタンがあると便利な場合もあります。Leap Motionコントローラーは指の動きとジェスチャーのみで操作でき、Valveの第3世代Knucklesコントローラー（こちらも現在は開発者向けのみ）はボタンを押さずに入力できます。しかし、Mudra Inspireはハンドヘルドデバイスを完全に排除することで、独自のコントローラーカテゴリーに分類されます。

しかし、ウェアラブルデバイス社は、Mudra Inspireは何かを持つことの利点を消し去るものではなく、むしろ可能性を広げるものだと考えています。Mudra Inspireを装着して水鉄砲を持ち、VR一人称視点シューティングゲームをプレイする様子を想像してみてください。人差し指でおもちゃのトリガーを引けば、キャラクターが射撃するのです。レーシングゲームで、プレートを握ってハンドルを操作している様子も想像してみてください。

確かに、ビデオゲームのようなオブジェクトを探し回るのはあまり現実的ではありません。ダミーオブジェクトを扱ったり、何も持たずにいるよりも、常に何か標準的なものを持っていることを好む人もいるでしょう。

もちろん、Mudra Inspireの真のポテンシャルはネイティブアプリケーションが登場するまでは分かりません。しかし、堅牢なハードウェアを備えたこのXRバンドコントローラーは、VRとARに革命を起こし、仮想現実と拡張現実をより直感的に操作できるものにする道のりを既に大きく前進させています。

詳細: 最高のバーチャルリアリティヘッドセット

詳細: すべてのバーチャルリアリティコンテンツ

詳細: バーチャルリアリティの基礎

シャロン・ハーディングは、ゲーム周辺機器（特にモニター）、ノートパソコン、バーチャルリアリティなど、テクノロジー関連の報道で10年以上の経験があります。以前は、Channelnomicsでハードウェア、ソフトウェア、サイバーセキュリティ、クラウド、その他のIT関連の出来事を含むビジネステクノロジーを取材し、CRN UKにも寄稿していました。