Microsoft の Mixed Reality 向け MRTouch は、あらゆる表面を仮想タッチスクリーンに変換します

Microsoft は、MR テクノロジーの新しいユースケース シナリオを開発するために Windows OS に基づいたプラットフォーム全体を作成したため、Mixed Reality の分野における先駆者であると言っても間違いではありません。 HP や Acer などの OEM はすでに複数の市場で MR ヘッドセットをリリースしていますが、Microsoft の MR プロジェクトである HoloLens はまだ市販されていません。

利用可能性が限られているにもかかわらず、Microsoft の研究チームはいくつかの本当に注目すべき研究を行っており、その進歩の最新の例は、あらゆる表面を仮想タッチスクリーンに変換する MR Touch です。この未来的なテクノロジーは、HoloLens ヘッドセットを装着しているユーザーの周囲のあらゆる平面をタッチスクリーンに変換し、Web サーフィンや他のタスクの中で 3D オブジェクトの表示など、さまざまな方法で対話できるようにします。

MRTouch は完全なマルチタッチ サポートを備えており、ユーザーの環境と手のジェスチャを継続的に追跡することで深さと近接データを計算して入力を登録します。タッチ検出成功率は 97.5%、空間精度は平均距離内誤差 5.4 mm に達します。ユーザーは、任意の表面上で指をドラッグして仮想タッチスクリーンを作成し、デフォルトの Windows 10 レイアウトに似たインターフェイスから任意のアプリを選択するだけで、アプリを起動できます。

実行できるタスクの範囲に関しては、ユーザーは、パンやズームなどのジェスチャのサポートを備えた、MRTouch を使用した日常的なタスクのためのコンピューティング マシンとして、HoleLens ヘッドセットを使用できるようです。 MRTouch によって生成される仮想タッチスクリーンは、リアルな 3D コンテンツを作成することもでき、タッチ入力を通じて正確に調整して Minecraft でブロック配置を作成するなど、3D 空間でインタラクションを作成するための空中ジェスチャもサポートしています。

このビデオでは、テスト ユーザーが指をドラッグして 2 次元のブロックを作成し、拳を開いてブロックを 3 次元のモデルに変換し、手を上下に持ち上げて高さを調整する様子が示されています (マイノリティ リポートやトニー スタークのジャービスとは異なります) AI）。さらに、ユーザーは空中インターフェイスを平面に移動して、通常のタッチスクリーンと同様に操作することもできますが、MRTouch テクノロジーがいつより広範囲にリリースされるかについては詳細がありません。