本文へスキップ
スキルアップカレッジ

空間コンピューティングと入出力の仕組み——6DoF・パススルー・アイトラッキング

レッスン3：空間コンピューティングと入出力の仕組み——6DoF・パススルー・アイトラッキング

このレッスンで学ぶこと

  • 空間コンピューティングの定義と、従来のコンピューティングとの違いを説明できる
  • 6DoF と 3DoF の意味と、体験にどう影響するかを理解できる
  • パススルー（VST と OST）の 2 方式の仕組みと使い分けを説明できる
  • アイトラッキング・ハンドトラッキング・ハプティクスの役割を整理できる
  • 視野角・リフレッシュレート・IPD が VR 酔いと没入感に与える影響を語れる

前のレッスンでは、主要 5 機種の位置づけと選定軸を整理しました。このレッスンでは、それらの端末の内部で何が起きているのか——空間コンピューティングの入出力の仕組みを扱います。技術用語の意味と、それぞれが体験にどう影響するかを、非技術系の読者にも通じる言葉で解きます。

空間コンピューティングとは何か

空間コンピューティングは、Apple が Vision Pro の発売に合わせて広めた語で、「ユーザーの周囲の 3 次元空間を計算の対象にするコンピューティング」を指します。従来のコンピューティングとの違いは、以下の 3 点に集約されます。

  • 入力：マウスとキーボード（2D 座標）→ 頭の動き、視線、手のジェスチャー、音声（3D 座標と身体）
  • 出力：平面ディスプレイ（2D）→ ユーザーを囲む立体空間（3D）
  • 文脈：アプリの中で完結（デジタル空間）→ 実世界と重なる（物理空間）

「空間コンピューティング」という言葉は 2003 年に MIT の学生 Simon Greenwold が学位論文で使ったのが最初とされます。当時はまだハードウェアが追いつかず、コンセプト止まりでしたが、20 年を経て 2024 年の Vision Pro で実装が広く語られるようになりました。

6DoF と 3DoF——動きの自由度の違い

HMD のスペック表で必ず出てくる「6DoF」「3DoF」は、Degrees of Freedom（自由度）の略で、頭や体の動きをどこまで追跡できるかを示します。

  • 3DoF（3 自由度）：頭の回転のみ（Yaw、Pitch、Roll）を追跡。座って首を回すだけの体験
  • 6DoF（6 自由度）：頭の回転に加えて、頭と体の位置移動（前後・左右・上下）も追跡。歩き回れる体験
flowchart LR
  A[3DoF<br/>Yaw + Pitch + Roll<br/>回転のみ<br/>座って首を回す] --> B[6DoF<br/>+ X + Y + Z<br/>回転と移動<br/>歩き回れる]

現在の主要 5 機種はすべて 6DoF ですが、10 年前の VR ヘッドセットや、現在も市場に残る安価な VR ビューワーは 3DoF です。6DoF は VR 酔いを大きく減らすという重要な副次効果があります。3DoF で歩くコンテンツを見ると、視覚と前庭感覚のずれが強く出て酔いやすくなります。6DoF なら実際の身体の動きに合わせて視覚が更新されるため、酔いが起きにくくなります。

位置追跡の方式

6DoF の位置追跡は、以下の 2 方式に分けられます。

  • 外部トラッキング：部屋の壁や天井にセンサー（ライトハウスなど）を設置し、HMD の位置を追跡する方式。HTC Vive の Steam VR や、初期の Oculus Rift の Constellation。精度が高いが設置が重い
  • インサイドアウト：HMD 側のカメラで周囲を撮影し、自機の位置を推定する方式（SLAM、Simultaneous Localization and Mapping）。Meta Quest 3、Apple Vision Pro、HoloLens 2、Magic Leap 2、PICO 4 Ultra はすべてこの方式。設置不要で使いやすい

パススルー——VST と OST の 2 方式

xR で「実世界と仮想世界を重ねる」ためには、実世界をユーザーに見せる方法（パススルー）が必要です。方式は 2 つに分けられます。

VST（Video See-Through、ビデオ透過）

外側のカメラで実世界を撮影し、その映像を HMD 内側のディスプレイに表示して、その上に仮想オブジェクトを重ねる方式。Meta Quest 3、Apple Vision Pro、PICO 4 Ultra が採用します。

  • メリット：明るさや色味を自由に加工できる、実世界と仮想物体の重ね合わせが精密、屋内屋外を問わない
  • デメリット：カメラとディスプレイの遅延（数十ミリ秒）が VR 酔いの原因になりうる、電源が切れると外が見えなくなる

OST（Optical See-Through、光学透過）

透明なガラスやウェーブガイド（導光板）を通して実世界を直接見つつ、その上に半透明の 3D ホログラムを投影する方式。Microsoft HoloLens 2、Magic Leap 2 が採用します。

  • メリット：実世界は透過するため遅延ゼロ、電源が切れても実世界は見え続ける、業務中の安全性が高い
  • デメリット：屋外の日光下では投影された仮想オブジェクトの輝度が負けやすい、視野角が狭くなりがち、色再現の精度に限界

💡 ポイント VST と OST は「どちらが優れるか」ではなく「何を置き換えるか」で選ぶ、という発想が重要です。座って設計レビューをするなら VST、立って組み立て作業を続けるなら OST、というように業務適合で選定します。両方式の混在（VR モードでは VST、AR モードでは OST 相当のパススルー透明度）を 1 台で実現する Vision Pro のような機種も増えつつあります。

アイトラッキング——「見ている場所」を計算に使う

アイトラッキングは、赤外線 LED とカメラで瞳孔の位置を追跡し、ユーザーが今どこを見ているかを HMD が把握する技術です。Apple Vision Pro、Meta Quest Pro、HoloLens 2、Magic Leap 2 に搭載されています。

  • 選択操作：見つめた対象をタップやピンチで選ぶ（Vision Pro の主入力）
  • フォビエイテッドレンダリング：見ている中心部だけを高解像度で描画し、周辺部の解像度を落として GPU 負荷を減らす（ヘッドセットのバッテリーを持たせる主要技術）
  • ヒートマップ：ユーザーが何を見て何を見なかったかの分析（教育・広告・製造品検の応用）

ハンドトラッキング——「手を映す」から「手を計算する」へ

ハンドトラッキングは、HMD 外側のカメラで手を撮影し、指の関節の位置を骨格モデルとして推定する技術です。2019 年の Oculus Quest 初代からコンシューマー機に広く搭載されるようになりました。コントローラーを持たなくても、ピンチ・スワイプ・つまむ・広げるなどの操作ができます。

Meta Quest 3、Apple Vision Pro、HoloLens 2、Magic Leap 2、PICO 4 Ultra はすべてハンドトラッキングを搭載します。ただし精度は端末により違いがあり、Apple Vision Pro のトラッキング精度は業界随一と評価されます。

ハプティクス——触覚で「触れた感」を返す

ハプティクスは、振動や圧力で「触れた」「押した」の感触を返す技術です。コントローラーの振動が最も基本的で、より高度なものではグローブ型（Meta の Haptic Gloves 研究、HaptX Gloves 商用）、椅子型（bHaptics）、全身スーツ型（Teslasuit）などがあります。2026 年 7 月時点で全身ハプティクスはまだ実験段階で、企業導入の中心はコントローラー振動と、Vision Pro のような視覚・音響でハプティクスを錯覚させる設計です。

VR 酔いを決める 3 つのパラメータ——視野角・リフレッシュレート・IPD

VR 酔い（Motion Sickness、Cybersickness）は xR 体験の最大の障害で、装着者の 30% 以上が何らかの症状を経験するとされます。3 つのハードウェア・パラメータが体験の快適性を決めます。

視野角（FOV、Field of View）

人間の視野角は水平約 210°、垂直約 135° です。HMD の視野角がこれに近いほど没入感が高まりますが、レンズと画素密度のコストが上がります。

  • Meta Quest 3：水平約 110°、垂直約 96°
  • Apple Vision Pro：水平約 100°（公称値なしだが実測）
  • HoloLens 2：水平約 43°、垂直約 29°（OST の制約）
  • Magic Leap 2：水平約 45°、垂直約 55°

リフレッシュレート

1 秒あたりに画面が更新される回数（Hz）で、頭の動きに映像が追従するスムーズさを決めます。60 Hz 以下では酔いが強く出るため、xR では 72-120 Hz が主流です。

  • Meta Quest 3：72 Hz / 80 Hz / 90 Hz / 120 Hz（コンテンツで切替）
  • Apple Vision Pro：90 Hz / 96 Hz / 100 Hz
  • HoloLens 2：60 Hz
  • Magic Leap 2：120 Hz

IPD（瞳孔間距離）

左右の瞳孔の距離で、日本人成人の平均は約 63mm、個人差は 55-75mm あります。HMD のレンズ間隔が自分の IPD と合わないと、目の焦点調節に負担がかかり、酔いや目の疲れの原因になります。Meta Quest 3 は物理的にレンズを移動できる可変 IPD、Apple Vision Pro は購入時にオプティカル・インサートで補正、HoloLens 2 は瞳孔間距離を自動計測して調整します。

⚠️ 注意 VR 酔いは「慣れの問題」ではなく、ハードウェアと体験設計の問題です。連続装着 15 分で酔いが強く出るユーザーが 30% いる、という事実を PoC 設計の前提にしてください。「1 回 15 分、休憩 30 分」の運用ルールと、「加速や急な視点移動を含む体験は避ける」設計ルールを併用するのが定石です。

レンダリングパイプラインの全体像

xR コンテンツがユーザーに届くまでの内部処理を、簡略化して整理します。

flowchart LR
  A[センサー入力<br/>頭・目・手] --> B[トラッキング<br/>位置・視線推定]
  B --> C[ゲームエンジン<br/>Unity / Unreal]
  C --> D[描画<br/>フォビエイテッド<br/>レンダリング]
  D --> E[ディスプレイ出力<br/>左右目 90-120Hz]
  E --> F[パススルー合成<br/>実世界＋仮想]

このパイプライン全体の遅延（Motion-to-Photon Latency）は 20 ミリ秒以下が目標で、遅延が大きいと VR 酔いの原因になります。フォビエイテッドレンダリングは、この遅延を短く保ちつつ GPU 負荷を減らす主要技術です。

次のレッスンの予告

次のレッスンでは、xR コンテンツを開発するためのエコシステムを扱います。Unity と Unreal Engine の位置関係、OpenXR 標準、WebXR による Web ブラウザ内 xR、Reality Composer や visionOS SDK、LOD 設計、そして生成 AI × 3D の最新動向（NeRF、Gaussian Splatting）——を、開発を発注する立場から知っておくべき「見取り図」として整理します。

確認クイズ

理解の定着のために、6 問のクイズを解いてみてください。