パススルー(MR)(パススルー)
パススルーはVRヘッドセット搭載カメラで現実世界の映像をリアルタイム表示する機能で、仮想オブジェクトと現実空間を重ね合わせるMR(Mixed Reality)体験を実現する。Meta Quest 3やApple Vision Pro等で標準搭載されている。
パススルー(MR)とは
パススルー(Passthrough)は、VRヘッドセットに搭載されたカメラが撮影した現実世界の映像をヘッドセット内のディスプレイにリアルタイム表示する機能である。これにより、ヘッドセットを装着したまま周囲の環境を視認でき、さらに仮想オブジェクトを現実空間上に重ね合わせるMR(Mixed Reality / 複合現実)体験が可能になる。2023年のMeta Quest 3でカラーパススルーが普及し、2024年のApple Vision Proで「空間コンピューティング」として本格活用が始まった。
パススルー技術の進化
| 世代 | 方式 | 解像度 | カラー | 代表製品 | リリース年 |
|---|---|---|---|---|---|
| 第1世代 | モノクロ低解像度 | VGA相当 | なし | Oculus Quest 2 | 2020 |
| 第2世代 | カラー低解像度 | 720p相当 | あり(粗い) | PICO 4 | 2022 |
| 第3世代 | カラー高解像度 | 1080p相当 | あり(自然) | Meta Quest 3 | 2023 |
| 第4世代 | 超高解像度ステレオ | 4K相当 | あり(高忠実) | Apple Vision Pro | 2024 |
Quest 2のモノクロパススルーは安全確認用途のみだったが、Quest 3のカラーパススルーでMRゲーム・MR作業空間が実用レベルに到達した。
パススルーの技術的構成
高品質なパススルーを実現するための技術要素:
- ステレオカメラ: 左右2台以上のRGBカメラで立体視映像を取得。Quest 3は2台、Vision Proは2台のメインRGBカメラを使用
- 深度センサー: LiDAR(Vision Pro)またはIRプロジェクター(Quest 3)で環境の奥行きを計測
- 3Dメッシュ生成: 深度データから部屋の3Dメッシュをリアルタイム構築。仮想オブジェクトが現実の家具の裏に隠れる「オクルージョン」を実現
- 画像処理パイプライン: ディストーション補正、色補正、露出調整、レイテンシ補償をGPU/DSPで毎フレーム実行
- レイテンシ最適化: カメラ撮影からディスプレイ表示までの遅延を最小化(Quest 3: 約12ms、Vision Pro: 約12ms)
MR(Mixed Reality)のユースケース
パススルーを活用したMRの実用例:
ゲーム・エンターテインメント
- First Encounters(Quest 3): 自分の部屋の壁や天井を破って侵入するエイリアンと戦うMRゲーム
- Spatial(マルチプラットフォーム): 仮想ホワイトボードや3Dモデルを現実の会議室に配置
- AR Stickers / Decorations: 部屋をバーチャルに装飾するアプリ
生産性・業務
- 仮想マルチモニター: 現実の机の上に仮想ディスプレイを複数配置(Vision Pro: 無制限、Quest 3: 最大3枚)
- 3D CAD/デザイン: 現実空間に3Dモデルを実寸配置してサイズ感を確認
- リモート会議: 参加者のアバターを現実の部屋に配置
トレーニング・教育
- 医療訓練: 解剖模型を現実空間にMR表示して手術シミュレーション
- 保守・修理: 機器にMRオーバーレイで修理手順を表示
パススルー品質の評価基準
| 評価項目 | Quest 3S | Quest 3 | Vision Pro | 理想値 |
|---|---|---|---|---|
| 解像度 | 中程度 | 高い | 非常に高い | 網膜解像度 |
| 色再現性 | 良好 | 良好 | 優秀 | 100% sRGB |
| レイテンシ | 約14ms | 約12ms | 約12ms | <10ms |
| 視野角(パススルー) | 約110° | 約110° | 約100° | 180°+ |
| 暗所性能 | 粗い | やや良好 | 良好 | 暗視レベル |
| 立体視精度 | 良好 | 良好 | 優秀(LiDAR) | 完全一致 |
AR(拡張現実)との違い
パススルーMRと一般的なARの技術的な違い:
- パススルーMR(VST方式): 完全遮光のVRヘッドセット内にカメラ映像を表示。没入感が高く仮想オブジェクトの視認性が良いが、カメラ経由のため現実世界の画質が低下する。Quest 3、Vision Pro
- 光学シースルーAR(OST方式): 透明なレンズに映像を重畳。現実世界をそのまま見られるが、仮想オブジェクトが半透明になり暗い場所では視認困難。HoloLens 2(¥422,180)、Nreal Air(¥49,800)
- スマートフォンAR: カメラ映像にARオブジェクトを重畳して画面表示。最も手軽だが没入感は低い。ARKit/ARCore
よくある質問(FAQ)
Q1: パススルーでヘッドセットをつけたまま歩き回れますか? A: 限定的に可能だが推奨されない。パススルー映像にはわずかな遅延とカメラの死角があり、階段や段差の認識精度が不十分。室内の平坦な場所での移動は問題ないが、屋外歩行は安全上の理由でメーカーも非推奨としている。
Q2: パススルーの画質は今後どこまで向上しますか? A: 2026年時点のパススルー品質は「裸眼と遜色ない」レベルには達していない。Vision Proでさえ精細な文字の判読は困難。2028-2030年には網膜解像度(片眼60PPD以上)のパススルーが見込まれ、裸眼との差が体感できなくなると予測されている。
Q3: パススルーMRとVRモードは簡単に切り替えられますか? A: Quest 3/3Sではコントローラーのダブルタップまたはサイドボタンで即座に切替可能。多くのアプリがVR←→MRの動的切替に対応しており、ゲーム中に一時的にパススルーで周囲を確認することも2秒程度で行える。
まとめ
- パススルーはVRヘッドセットのカメラで現実世界を映すMR技術
- Quest 3(2023年)でカラーパススルーが実用レベルに到達
- ゲーム・仮想マルチモニター・3D設計・教育で幅広く活用
- レイテンシ12-14ms、深度センサーによるオクルージョンが技術の核
- 光学シースルーARとは異なるVST方式で、没入感と画質のトレードオフがある