ARグラスの大躍進！上海交通大学のチームは、オクルージョン対応ARディスプレイにおける光透過の課題を克服するマスクバランス方式を提案した。

2026年、上海交通大学、グラーツ工科大学（オーストリア）、奈良先端科学技術大学院大学（日本）、浙江科学技術大学の研究者で構成される共同チームは、「マスクバランシング：オクルージョン対応光学シースルーヘッドマウントディスプレイのための知覚駆動型の動的可視性向上」と題する画期的な研究を権威ある学術誌 IEEE Transactions on Visualization and Computer Graphicsに発表した。 。この研究では、偏光光路と人間の視覚認識を同時に最適化することで、業界の重大な課題であるオクルージョン対応光学式シースルー AR ヘッドマウント ディスプレイ (OC-OSTHMD) における現実世界の光透過率が過度に低いという問題に対処し、それによって民生用および産業用グレードの AR グラスの商品化に対する重要な障害を取り除く革新的な「マスク バランシング」ソリューションを導入しています。

I. コア業界の問題点: ピクセルレベルのオクルージョンが原因で不可逆的な輝度損失が発生する

仮想要素と現実要素の間の相互オクルージョンが可能な光学式シースルー AR ヘッドマウント ディスプレイ (OC-OSTHMD) は、現実的な深さと物理環境へのシームレスな統合で仮想オブジェクトをレンダリングするために不可欠です。空間光変調器 (SLM) を利用してピクセルレベルの画像オクルージョンを実現することで、従来の半透明 AR システムの仮想画像に関連する「浮遊ファントム」問題を解決します。しかし、既存の光学アーキテクチャには、光伝送に関して避けられない欠点があります。

1. オクルージョン効果を実現するには、現実世界のシーンからの光が偏光を受ける必要があり、その結果、明るさが即座に 50% 失われます。

2. SLM、偏光ビームスプリッター (PBS)、光コンバイナーなどの複数のコンポーネントの積み重ねによって生じる信号減衰により、理論上の最大光透過率は 20% 未満に制限され、実際のプロトタイプでは 7% 未満に達することがよくあります。

3. 偏光成分による複数の光路反射とスペクトル損失により、周囲の明るさがさらに低下します。薄暗い屋内環境では、現実世界のビューが過度に暗くなり、ユーザーの観察や対話が妨げられ、安全上のリスクが生じます。

これまでのソリューションは、SLM 透過率の向上、反射型 LCoS/DMD テクノロジーへの切り替え、フォトクロミック材料の探索など、主にハードウェアの反復に焦点を当てていました。しかし、光学部品は光透過の物理的限界に直面しており、フォトクロミックアプローチには応答時間の遅さやピクセルレベルのオクルージョン精度の不足などの欠点があり、仮想世界と現実世界の輝度レベルの間の矛盾を根本的に解決できていません。仮想オブジェクトのリアルなオクルージョン深度の必要性と現実世界の高い視認性の要件のバランスが、次世代 AR デバイスの大量商業化にとって重大なボトルネックとなっています。

II.技術革新: 二重偏波光路融合 + 知覚駆動型動的変調

上海交通大学のチームは、単に個々のハードウェア コンポーネントを改善するだけのアプローチを超えて、「マスク バランシング法」を提案しました。この方法は、低コストの偏光光路変更と人間の視覚認識の定量的モデルを組み合わせて、現実世界のシーンと仮想画像の間の光透過率を動的に調整します。ソリューション全体では、既存の OC-OSTHMD (光学シースルー ヘッドマウント ディスプレイ) に回転直線偏光子 (バランシング LP) を追加するだけで済み、高い互換性と低い改造コストを実現します。

1. 二重偏波光融合アーキテクチャ

自然光は偏光ビーム スプリッターによって 2 つの独立した偏光パスに分割され、それぞれが特定の機能を果たします。

s 偏光オクルージョン パス (マスキング ビジョン): オリジナルの AR 光学システムを通過し、SLM を利用して、仮想コンテンツによる現実世界のピクセル レベルのオクルージョンを実現し、大幅な光損失はありますが、空間的な奥行きの感覚を提供します。

p 偏光直接透過パス (ネイティブな現実世界の視覚): すべてのオクルージョン関連の光学コンポーネントをバイパスし、追加の光減衰を発生させずに周囲のシーンの元の明るさを完全に維持します。

このシステムは、回転モジュールを使用して直線偏光子と偏光ビームスプリッターの間の角度 φ を調整し、現実世界の光と虚像光の透過率を正確に制御します。伝送速度は次の式によって決まります。実世界の直接伝送 (T_{pass} = cos^2φ);遮蔽された現実世界のビューと仮想画像の送信 (T_{マスク}/T_{画像} = sin^2φ cdot T_{HMD}/T_{ディスプレイ})。この角度を調整すると、視覚的な重み付けをリアルタイムで切り替えることができます。暗い環境では、直接透過経路の割合が増加して現実世界の視界が明るくなります。明るい環境では、仮想オブジェクトのコントラストを高めるために直接透過率が低下します。

2. 知覚駆動型リアルタイム変調システム

ダイナミック バランシング ロジック全体は、デュアル センサー アプローチ (視線追跡とシーンの視覚分析を組み合わせたもの) に基づいてリアルタイムで動作し、光学ハードウェア仕様に基づく計算のみに依存するのではなく、人間の視覚認識の原理と一致しています。

現実世界の視認性評価: シーン カメラが現実世界のビューをキャプチャし、画像は Peli コントラスト ピラミッドを使用して 7 つのバンドパス レベルに分解されます。システムは、評価基準として 4.7 cpd (1 度あたりのサイクル数) 中周波数帯域の二乗平均平方根 (RMS) コントラストを選択します。 Barten コントラスト感度関数 (Barten CSF) を視線追跡カメラからの瞳孔直径データと統合することにより、システムは人間の目が現実世界のシーンを認識するために必要な最小コントラストしきい値をリアルタイムで計算します。視認性がこの基準を下回る場合、システムは偏光角を自動的に調整して直接光路の明るさを高めます。

仮想オブジェクトの可視性評価: パワー スペクトル密度 (PSD) 解析が仮想モデルに対して実行され、高周波テクスチャ モデル (例: カエデの木、クリスマス ツリー) と低周波のミニマリスト モデル (例: ウサギ、ティーポット) が区別されます。仮想画像の明瞭さを定量化するためにウェーバー コントラストが使用されます。研究チームは、人間を対象とした 2 セットの実験を通じて知覚閾値を調整しました。仮想テクスチャを認識するための臨界ウェーバー コントラストは 0.537 であると決定されましたが、照明と影の効果を認識するための臨界閾値は 0.443 でした。仮想画像のコントラストがこれらのしきい値を下回ると、システムは自動的にオクルージョン光路の重みを増やして、仮想オブジェクトの知覚されるテクスチャと鮮明度を高めます。

このシステムは、カルマン フィルターを採用して視線追跡カメラでキャプチャされた変動する瞳孔データを平滑化し、機器のノイズを排除し、異なる照明条件間の移行時にスムーズで安定した調整を保証します。アルゴリズム スイートはデュアル スレッド並列処理を使用して動作し、シーン イメージ分析はメインのレンダリング スレッドとは独立して実行されます。その結果、計算オーバーヘッドが低くなり、主流の AR リアルタイム レンダリング エンジンとの互換性が得られます。

Ⅲ．人間の知覚実験: 視覚閾値の定量化と提案されたスキームの検証

知覚バランスの正確なベースラインを確立するために、チームは 3 セットの標準化されたユーザー実験を実施しました。これらはすべて上海交通大学の人間研究倫理委員会によって承認され、AR またはコンピューター グラフィックスの経験を持つ合計 36 人の参加者を募集しました。

1. 仮想テクスチャ知覚実験 (参加者 12 名): 大、中、小サイズのテクスチャを使用して、室内周囲照度の 4 つのレベル (29 ～ 626 cd/m²) をカバーする、さまざまな空間周波数を持つ仮想オブジェクトをシミュレートしました。結果は、高周波の細かいテクスチャは視覚認識に高いコントラストを必要とする一方、中周波モデルと低周波モデルの認識閾値の差は最小限であることを示しました。性別、AR の使用経験、瞳孔の大きさなどの要因は知覚閾値に大きな影響を与えておらず、参加者グループ全体で非常に一貫した知覚パターンが示されています。

2. 仮想照明と影の知覚実験 (参加者 24 人): ペアの仮想モデル (ティーポット、ロボット、クリスマス ツリーなど) (照明/影の反射があるものとないもの) を比較しました。参加者は、2 つのモデルが視覚的に同一に見えるまで偏光角を調整しました。この実験では、照明と影の効果には本質的に高周波の詳細が含まれており、低周波の幾何学モデル上でも簡単に区別できることが実証されました。空間周波数は、照明と影の知覚閾値に対して統計的に有意な影響を示さなかった。

3. 複数照明シナリオでの包括的な比較実験 (参加者 12 名): 卓上プロトタイプは、4 つの現実世界の照明条件をシミュレートするために構築されました: 屋内消灯 (8 cd/m²)、屋内照明オン (135 cd/m²)、屋外日陰 (287 cd/m²)、および屋外明るい光 (414 cd/m²)。提案されたソリューション (MB)、従来の非オクルージョン AR (AR)、および静的オクルージョン ヘッドセット (OC) の 3 つの条件間でブラインド比較が行われました。

· 低照度の屋内環境: 従来の AR がリード (47%) し、僅差でこのソリューション (44%) が続きましたが、従来のオクルージョン デバイスはわずか 8% に留まりました。

· 明るい屋内環境: このソリューションの優先率は 42% でした。

· 屋外の明るい光/日陰のシナリオ: このソリューションは、それぞれ 58% と 53% の優先率を達成し、従来のソリューションを大幅に上回りました。

· 総合評価: 参加者の 50% がマスクベースのバランシング システムを好み、36% が従来のオクルージョン ヘッドセットを選択し、標準のシースルー AR を選択したのは 14% のみでした。

現実世界の映像はその違いを明確に示しています。従来のオクルージョンベースの AR では、現実世界のビューはどの環境でもひどく色褪せて見えます。標準のノンオクルージョン AR では、屋外の明るい光の下では仮想コンテンツが事実上消えます。対照的に、マスク バランシング テクノロジは明るさを適応的に調整し、屋内では現実世界の鮮明な視界を維持しながら、明るい屋外条件では仮想オブジェクトのテクスチャ、照明、影を完全に維持します。これにより、両方のシナリオで最適な視覚体験が保証されます。

IV.アプリケーションの価値と業界全体のパラダイムシフト

1. 多様な導入シナリオ

この技術的進歩は消費者グレードの AR メガネを超えて広がり、プロの産業現場で計り知れない実用的価値を提供します。

· 産業 O&M: 物理的な機械構造の明確なビューを維持しながら、機器のメンテナンス中に青写真と注釈を重ね合わせます。

· 医療支援: 人体の現実世界のビューとデジタル注釈を組み合わせた、術中の画像オーバーレイとリハビリテーション トレーニング。

· 教育とトレーニング、車載ナビゲーション、リモート コラボレーション、建築設計などのアプリケーションにより、複雑な照明環境における AR デバイスの使いやすさが大幅に向上します。

2. AR ディスプレイ設計への新しいアプローチ

この研究は、業界におけるパラダイムシフトを示唆しています。AR 光学設計は、これまでハードウェアの光透過率や解像度などの物理パラメータの最適化に主に焦点を当てていましたが、この研究は、人間の視覚認識が無視できない重要な設計次元であることを実証しています。同チームによるこれまでの研究では、人間の実際の視覚認識と光学機器による測定値との間に大きな差異があることが確認されており、ハードウェアの最適化だけでは最高の視覚体験を達成できないことが示されている。知覚主導の制御スキームは、光学ハードウェアの物理的制限を克服できます。ユーザーの視覚的な快適さと操作の安全性を確保しながら、デバイスのサイズやコストに妥協することなく、仮想画像と現実世界の画像の品質を同時に向上させます。

V. 現状の限界と今後の研究の方向性

現在のデスクトップ プロトタイプにはまだ最適化の余地があり、チームは将来の反復に向けて次の方向性を計画しています。

オクルージョン精度の最適化: 現実世界の明るさにより、オクルージョン境界でわずかな光漏れが発生する可能性があります。将来の改良では、高輝度マイクロ OLED、色補正アルゴリズム、およびタスク指向のバランシング戦略 (高精度モデル化シーンでの仮想オクルージョン精度を優先) を統合することで、この問題が軽減されます。

スムーズな明るさ調整: 現在の偏光回転速度は速いため、突然の明るさの変化が生じ、視覚的に不快感を引き起こす可能性があります。将来の開発は、シームレスで段階的な明るさの移行のためのアルゴリズムに焦点を当てます。

両眼適応プロトタイプ: 現在のデバイスは単眼です。次のステップでは、両眼マスク バランシング システムを構築し、両眼視覚コントラスト知覚モデルを組み込みます。

自動物体スペクトル分類: 仮想物体の高周波および低周波の特徴をリアルタイムで自動認識できるため、知覚しきい値を手動で設定する必要がなくなります。

上海交通大学のチームが提案したマスクバランス技術は、光学式シースルーARの普及を妨げてきた長年の明るさの矛盾を解決する。二重偏光光路向けのハードウェアの改善と知覚主導型の動的バランシング アルゴリズムを組み合わせることで、このソリューションは実装が容易になり、主流の AR 光学アーキテクチャと互換性があります。広範な人間を対象とした実験と多様な照明シナリオを通じて検証され、薄暗い屋内環境から明るい屋外環境まで、あらゆる条件で現実世界の環境の視認性と仮想オブジェクトのリアルなテクスチャを同時に強化します。この技術は、視覚知覚科学とニアアイディスプレイエンジニアリングを深く統合することにより、次世代ARグラスの新たな最適化の道を切り開き、消費者、産業、医療分野におけるARデバイスの終日現実世界展開のための実行可能なソリューションを提供し、それによって光学シースルーARを研究室のプロトタイプから実用的な製品に進化させます。

出典: CINNO