Revoluție majoră pentru ochelarii AR! O echipă de la Universitatea Jiao Tong din Shanghai a propus o schemă de echilibrare a măștilor, depășind provocarea transmisiei luminii în afișajele AR capabile de ocluzie.

În 2026, o echipă de colaborare formată din cercetători de la Universitatea Jiao Tong din Shanghai, Universitatea de Tehnologie Graz (Austria), Institutul de Știință și Tehnologie Nara (Japonia) și Universitatea de Știință și Tehnologie din Zhejiang a publicat un studiu de referință intitulat „Mask Balancing: Perception-Driven Dynamic Visibility Enhancement for Occlusion-Capable Optical Optical See-Tactions” în prestigioasa jurnală Head-Motioned DisplayEE . pe vizualizare și grafică pe computer . Studiul introduce o soluție inovatoare de „echilibrare a măștilor” care abordează o provocare critică a industriei - transmisia excesiv de scăzută a luminii din lumea reală în afișajele optice cu ocluzie AR montate pe cap (OC-OSTHMD) - prin optimizarea simultană a căilor optice de polarizare și a percepției vizuale umane, înlăturând astfel un obstacol cheie în calea consumatorului AR și a comercializării.

I. Punctul de durere al industriei de bază: Ocluzia la nivel de pixel provoacă pierderi ireversibile de luminanță

Ecranele optice transparente AR montate pe cap (OC-OSTHMD) capabile de ocluzie reciprocă între elementele virtuale și reale sunt esențiale pentru redarea obiectelor virtuale cu adâncime realistă și integrare perfectă în mediul fizic. Ei folosesc modulatori de lumină spațială (SLM) pentru a obține ocluzia imaginii la nivel de pixel, rezolvând astfel problema „fantomă plutitoare” asociată cu imaginile virtuale în sistemele AR semi-transparente tradiționale. Cu toate acestea, arhitecturile optice existente suferă de un dezavantaj inevitabil în ceea ce privește transmisia luminii:

1. Pentru a obține efectul de ocluzie, lumina din scena reală trebuie să sufere polarizare, rezultând o pierdere imediată de 50% a luminozității;

2. Atenuarea semnalului cauzată de stivuirea mai multor componente - cum ar fi SLM-uri, Polarizing Beam Splitter (PBS) și combinatoarele optice - limitează transmisia maximă teoretică a luminii la sub 20%, prototipurile reale ating adesea mai puțin de 7%;

3. Reflexiile multiple ale căii optice și pierderile spectrale de la componentele de polarizare reduc și mai mult luminozitatea mediului ambiant; în medii interioare întunecate, imaginea asupra lumii reale devine excesiv de întunecată, împiedicând observarea și interacțiunea utilizatorului, punând în același timp riscuri pentru siguranță.

Soluțiile anterioare s-au concentrat în principal pe iterații hardware, cum ar fi creșterea transmisiei SLM, trecerea la tehnologii reflectorizante LCoS/DMD sau explorarea materialelor fotocromice. Cu toate acestea, componentele optice se confruntă cu limite fizice ale transmisiei luminii, iar abordările fotocromice suferă de dezavantaje precum timpii de răspuns lenți și precizia insuficientă a ocluziei la nivel de pixeli, nereușind să rezolve în mod fundamental conflictul dintre nivelurile de luminozitate virtuală și cea reală. Echilibrarea nevoii de adâncime realistă a ocluziei pentru obiectele virtuale cu cerința de vizibilitate ridicată a lumii reale a devenit blocajul critic pentru comercializarea în masă a dispozitivelor AR de generația următoare.

II. Inovație tehnică: fuziune a căii optice cu polarizare dublă + modulație dinamică determinată de percepție

Mergând dincolo de abordarea pur și simplu de îmbunătățire a componentelor hardware individuale, echipa de la Universitatea Jiao Tong din Shanghai a propus o „metodă de echilibrare a măștilor”. Această metodă combină modificări ale căii optice de polarizare la costuri reduse cu un model cantitativ al percepției vizuale umane pentru a ajusta dinamic raportul de transmisie a luminii dintre scena reală și imaginile virtuale. Întreaga soluție necesită doar adăugarea unui polarizator liniar rotativ (Balancing LP) la un OC-OSTHMD (Afișaj Optical See-Through Head-Mounted) existent, oferind compatibilitate ridicată și costuri reduse de modificare.

1. Arhitectură de fuziune optică cu polarizare duală

Lumina naturală este împărțită de un divizor de fascicul polarizant în două căi de polarizare independente, fiecare având o funcție specifică:

Calea de ocluzie a polarizării s (viziunea de mascare): trece prin sistemul optic AR original și utilizează un SLM pentru a obține ocluziunea la nivel de pixel a lumii reale prin conținut virtual, oferind un sentiment de adâncime spațială, deși cu pierderi semnificative de lumină;

Calea de transmisie directă cu polarizare p (viziune nativă în lumea reală): Ocolește toate componentele optice legate de ocluzie, păstrând pe deplin luminozitatea originală a scenei ambientale fără atenuare suplimentară a luminii.

Sistemul folosește un modul rotativ pentru a regla unghiul φ dintre polarizatorul liniar și separatorul de fascicul polarizant, controlând cu precizie rapoartele de transmisie ale luminii reale și ale luminii imaginii virtuale. Ratele de transmisie sunt guvernate de următoarele formule: transmisie directă în lumea reală (T_{pass} = cos^2φ); și transmiterea pentru vizualizarea oclusă a lumii reale și imaginea virtuală (T_{mask}/T_{image} = sin^2φ cdot T_{HMD}/T_{display}). Ajustarea acestui unghi permite comutarea în timp real a ponderii vizuale: în medii cu lumină scăzută, proporția traseului de transmisie directă este crescută pentru a lumina vederea reală; în medii cu lumină ridicată, raportul de transmisie directă este redus pentru a spori contrastul obiectelor virtuale.

2. Sistem de modulație în timp real determinat de percepție

Întreaga logică de echilibrare dinamică funcționează în timp real pe baza unei abordări cu senzori duali - combinând urmărirea ochilor cu analiza vizuală a scenei - și se aliniază cu principiile percepției vizuale umane, mai degrabă decât să se bazeze doar pe calcule bazate pe specificațiile hardware optic:

Evaluarea vizibilității în lumea reală: o cameră de scenă captează vederea reală, iar imaginea este descompusă în șapte niveluri de trecere a benzii folosind o piramidă de contrast Peli. Sistemul selectează contrastul RMS (Root Mean Square) al benzii de frecvență medie de 4,7 cpd (cicluri pe grad) ca măsurătoare de evaluare. Prin integrarea funcției de sensibilitate la contrast Barten (Barten CSF) cu datele despre diametrul pupilei de la camera de urmărire a ochilor, sistemul calculează, în timp real, pragul minim de contrast necesar pentru ca ochiul uman să perceapă scena din lumea reală. Dacă vizibilitatea scade sub acest standard, sistemul ajustează automat unghiul de polarizare pentru a crește luminozitatea căii optice directe.

Evaluarea vizibilității obiectelor virtuale: Analiza Power Spectral Density (PSD) este efectuată pe modele virtuale pentru a distinge între modelele texturate de înaltă frecvență (de exemplu, arțar, brazi de Crăciun) și modele minimaliste cu frecvență joasă (de exemplu, iepuri, ceainice), cu contrastul Weber utilizat pentru a cuantifica claritatea imaginilor virtuale. Echipa a calibrat pragurile perceptuale prin două seturi de experimente cu subiect uman: contrastul critic Weber pentru recunoașterea texturilor virtuale a fost determinat a fi 0,537, în timp ce pragul critic pentru recunoașterea efectelor de iluminare și umbră a fost de 0,443. Atunci când contrastul imaginii virtuale scade sub aceste praguri, sistemul crește automat ponderarea căii optice de ocluzie pentru a îmbunătăți textura percepută și definiția obiectelor virtuale.

Sistemul folosește un filtru Kalman pentru a netezi datele fluctuante ale pupilei capturate de camera de urmărire a ochilor, eliminând zgomotul echipamentului și asigurând o reglare lină și stabilă în timpul tranzițiilor între diferite condiții de iluminare. Suita de algoritmi funcționează folosind paralelismul cu două fire, analiza imaginii scenei rulând independent de firul principal de randare; acest lucru are ca rezultat o supraîncărcare de calcul redusă, făcându-l compatibil cu motoarele de randare în timp real AR obișnuite.

III. Experimente de percepție umană: cuantificarea pragurilor vizuale și validarea schemei propuse

Pentru a stabili o linie de bază precisă pentru echilibrul perceptiv, echipa a efectuat trei seturi de experimente standardizate ale utilizatorilor - toate aprobate de Comitetul de etică al cercetării umane al Universității Jiao Tong din Shanghai - recrutând un total de 36 de participanți cu experiență în AR sau grafică pe computer.

1. Experimentul de percepție a texturii virtuale (12 participanți): Texturile de dimensiuni mari, medii și mici au fost folosite pentru a simula obiecte virtuale cu frecvențe spațiale diferite, acoperind patru niveluri de iluminare ambientală interioară (29–626 cd/m²). Rezultatele au arătat că texturile fine și de înaltă frecvență necesită un contrast mai mare pentru recunoașterea vizuală, în timp ce pragurile de recunoaștere pentru modelele cu frecvență medie și joasă diferă minim. Factori precum sexul, experiența de utilizare a RA și dimensiunea elevilor nu au avut un impact semnificativ asupra pragurilor de percepție, indicând modele perceptuale foarte consistente în grupul de participanți.

2. Experimentul de iluminare virtuală și percepție a umbrei (24 de participanți): au fost comparate modele virtuale pereche (de exemplu, ceainic, robot, brad de Crăciun) – unul cu reflexii de iluminare/umbră și unul fără. Participanții au ajustat unghiul de polarizare până când cele două modele au părut vizual identice. Experimentul a demonstrat că efectele de iluminare și umbră conțin în mod inerent detalii de înaltă frecvență, permițându-le să fie distinse cu ușurință chiar și pe modele geometrice de joasă frecvență; frecvența spațială nu a arătat niciun efect semnificativ statistic asupra pragurilor de percepție pentru iluminare și umbre.

3. Experiment comparativ cuprinzător în scenarii de iluminare multiplă (12 participanți): a fost construit un prototip de masă pentru a simula patru condiții de iluminare din lumea reală: lumini interioare stinse (8 cd/m²), lumini interioare aprinse (135 cd/m²), umbrite în aer liber (287 cd/m²) și lumină puternică exterioară (414 cd/m²). A fost efectuată o comparație oarbă între trei condiții: soluția propusă (MB), AR tradițional neoclus (AR) și căști cu ocluzie statică (OC).

· Medii interioare cu lumină scăzută: AR tradițional a deținut liderul (47%), urmat îndeaproape de această soluție (44%), în timp ce dispozitivele tradiționale de ocluzie au rămas în urmă cu doar 8%;

· Medii interioare luminoase: Această soluție a condus cu o rată de preferință de 42%;

· Scenarii de lumină puternică/umbrită în aer liber: Această soluție a atins rate de preferință de 58% și respectiv 53%, depășind semnificativ soluțiile tradiționale;

· Evaluare generală: 50% dintre participanți au preferat sistemul de echilibrare pe bază de mască, 36% au ales căștile tradiționale cu ocluzie și doar 14% au optat pentru AR transparentă standard.

Înregistrările din lumea reală demonstrează clar diferențele: cu AR tradițională bazată pe ocluzie, viziunea asupra lumii reale pare sever distrusă în toate mediile; cu AR standard non-ocluzie, conținutul virtual dispare practic în lumina puternică exterioară; dimpotrivă, tehnologia de echilibrare a măștilor ajustează adaptiv luminozitatea - menținând o vedere clară a lumii reale în interior, păstrând în același timp pe deplin texturile, iluminarea și umbrele obiectelor virtuale în condiții luminoase de exterior - asigurând astfel o experiență vizuală optimă în ambele scenarii.

IV. Valoarea aplicației și schimbarea paradigmei la nivel de industrie

1. Scenarii diverse de implementare

Această descoperire tehnologică se extinde dincolo de ochelarii AR de calitate pentru consumatori, oferind o valoare practică imensă în medii industriale profesionale:

· O&M industrial: suprapunerea planurilor și adnotărilor în timpul întreținerii echipamentelor, menținând în același timp o vedere clară a structurii fizico-mecanice;

· Asistență medicală: suprapunere de imagini intraoperatorii și antrenament de reabilitare, combinând vederea reală a corpului uman cu adnotări digitale;

· Aplicații precum educația și formarea, navigarea în vehicul, colaborarea la distanță și designul arhitectural, îmbunătățind semnificativ gradul de utilizare al dispozitivului AR în medii complexe de iluminare.

2. O nouă abordare a designului de afișare AR

Această cercetare propune o schimbare de paradigmă în industrie: în timp ce designul optic AR s-a concentrat anterior în primul rând pe optimizarea parametrilor fizici, cum ar fi transmisia și rezoluția hardware a luminii, acest studiu demonstrează că percepția vizuală umană este o dimensiune critică a designului care nu poate fi trecută cu vederea. Cercetările anterioare ale echipei au confirmat o discrepanță semnificativă între percepția vizuală umană reală și măsurătorile efectuate de instrumente optice, indicând că optimizarea hardware-ului singură nu poate obține cea mai bună experiență vizuală. O schemă de control bazată pe percepție poate depăși limitările fizice ale hardware-ului optic; îmbunătățește simultan calitatea atât a imaginilor virtuale, cât și a celor reale, fără a compromite dimensiunea sau costul dispozitivului, asigurând în același timp confort vizual și siguranță operațională pentru utilizator.

V. Limitări actuale și direcții viitoare de cercetare

Există încă loc de optimizare în prototipul actual de desktop, iar echipa a planificat următoarele direcții pentru iterațiile viitoare:

Optimizarea preciziei ocluziei: iluminarea reală poate provoca o ușoară scurgere de lumină la limitele ocluziei; Îmbunătățirile viitoare vor atenua acest lucru prin integrarea de micro-OLED-uri de înaltă luminozitate, algoritmi de compensare a culorii și strategii de echilibrare orientate spre sarcini (prioritizarea acurateței ocluziei virtuale în scenele modelate de înaltă precizie).

Reglare lină a luminozității: Vitezele curente de rotație a polarizării sunt mari, ceea ce duce la schimbări bruște de luminozitate care pot provoca disconfort vizual; dezvoltarea viitoare se va concentra pe algoritmi pentru tranziții de luminozitate fără întreruperi, treptate.

Prototip de adaptare binoculară: Dispozitivul actual este monocular; următorul pas implică construirea unui sistem de echilibrare a măștii binoculare și încorporarea unui model de percepție a contrastului vizual binocular.

Clasificarea spectrală automată a obiectelor: permite recunoașterea automată în timp real a caracteristicilor de înaltă și joasă frecvență ale obiectelor virtuale, eliminând necesitatea configurației manuale a pragurilor de percepție.

Tehnologia de echilibrare a măștilor propusă de echipa de la Universitatea Jiao Tong din Shanghai rezolvă conflictul de luminozitate de lungă durată care a împiedicat adoptarea pe scară largă a AR optic transparent. Prin combinarea îmbunătățirilor hardware pentru căile optice cu polarizare dublă cu un algoritm de echilibrare dinamică bazat pe percepție, soluția este ușor de implementat și compatibilă cu arhitecturile optice AR mainstream. Validat prin experimente extinse cu subiecte umane și diverse scenarii de iluminare, îmbunătățește simultan vizibilitatea mediului real și textura realistă a obiectelor virtuale în toate condițiile - de la setări interioare slabe la medii exterioare luminoase. Prin integrarea profundă a științei percepției vizuale cu ingineria afișajului aproape de ochi, această tehnologie deschide o nouă cale de optimizare pentru ochelarii AR de generația următoare, oferind o soluție viabilă pentru desfășurarea pe tot parcursul zilei, în lumea reală, a dispozitivelor AR în sectoarele de consum, industrial și medical, avansând astfel RA optic transparent de la prototipuri de laborator la produse practice.

Sursa: CINNO