Apple Vision Pros spelförändrande EyeSight-funktion är något vi inte sett tidigare på ett AR/VR-headset. Så här är allt du behöver veta om det.
Apples $3 499 Vision Pro-headset har en spelförändrande funktion som heter EyeSight. Inbyggt i visionOS minskar EyeSight känslan av isolering när du bär headsetet.
Vision Pro får dig att känna att människor i närheten är en del av din AR-upplevelse (augmented reality). Den indikerar också för andra runt omkring dig om du kan se dem eller är nedsänkt i AR genom att ge visuella signaler om vad du fokuserar på.
Följ med för att lära dig allt om EyeSight, inklusive hur det fungerar, de olika nedsänkningslägen det stöder och mer.
Vad är Vision Pros EyeSight-funktion?
EyeSight är ett samspel av hårdvara och mjukvara de bästa funktionerna i Vision Pro-headsetet. Dess primära syfte är att visa andra en digital version av dina blinkande ögon.
"Dina ögon är en kritisk indikator på anslutning och känslor, så Vision Pro visar dina ögon när någon är i närheten," sa Apple under WWDC 2023 keynote. Effekten gör att enheten verkar genomskinlig. Dessutom kan EyeSight återge olika rörelsebakgrunder för att informera människor i den verkliga världen vad du för närvarande fokuserar på.
I en Apple Newsroom-inlägg, Apple kallar funktionen "en extraordinär innovation som hjälper användare att hålla kontakten med dem runt omkring dem." För att vara säker, det finns inte riktigt något liknande EyeSight på andra AR/VR-headset.
Hur fungerar EyeSight på Vision Pro?
En utåtvänd OLED-panel på headsetets framsida använder en linsformad lins som enligt Apple projicerar "rätt perspektiv på dina ögon till varje person som tittar på dig."
När Vision Pro upptäcker att du konsumerar media eller använder en app, återger den lämplig grafik på EyeSight-skärmen för att ge visuella signaler. Men när någon närmar sig dig kommer Vision Pro att visa dina ögon istället.
För att visa dina ögon realistiskt använder EyeSight data från interna infraröda kameror, två per öga, för att fånga dina ögonrörelser och ansiktsuttryck. Denna data matas till en maskininlärningsalgoritm som kombinerar den med din digitala Persona, skapad när du ställer in enheten med den främre TrueDepth-kameran.
Vad andra ser är en naturlig representation av området runt dina ögon snarare än dina faktiska ögon.
De olika EyeSight-lägena på Vision Pro
EyeSight stöder flera visuella ledtrådar för att låta andra veta vad du gör i AR, som att vara helt nedsänkt i AR, ta bilder, etc. EyeSight växlar automatiskt läge beroende på vad du gör vid varje given tidpunkt. Som sådan är EyeSight-funktionen en av de coolaste tillämpningarna av AR-teknik i vardagen vi har sett hittills.
Transparent läge visar dina digitala ögon
Detta läge låter dig se den andra personen och avslöja dina ögon för dem. När headsetets sensorer plockar upp en person som närmar sig dig, kommer EyeSight tillfälligt få dem att "bryta sig in" i din AR/VR-värld så att du vet att de finns i närheten.
Samtidigt kommer funktionen att visa dina ögon för personen framför dig så att de vet att de har din uppmärksamhet. När det inte finns någon i rummet stängs EyeSight av och visar inte dina ögon eller någon anpassad bakgrund.
Fullständigt nedsänkningsläge döljer dina ögon
När det är helt uppslukat av AR eller VR, animerar EyeSight ett färgglatt mönster på den utåtvända skärmen. Effekten påminner något om Siri orb-animationen, och de runt omkring dig vet att du är upptagen med aktivitet. EyeSight kan också göra dina ögon halvtransparenta när du använder en app, beroende på nivån av nedsänkning.
Capture Mode Ersätter slutarljudet
EyeSight går in i detta läge när du tar rumsliga bilder och videor med headsetet. En visuell indikator för medieinspelningsläget är ett vitt, dimmliknande mönster som animeras när du spelar in eller blinkar när du tar en bild.
Den visuella indikatorn fungerar som en viktig integritetsindikator för folk runt omkring dig att du spelar in dem, liknande kameraslutarljudet på din iPhone.
EyeSight gör din AR/VR-upplevelse mindre isolerande
Det som lät som ett galet rykte har visat sig vara sant. Som en unik funktion för Vision Pro är EyeSight en av Apples största fördelar jämfört med konkurrerande AR/VR-headset. Om hela poängen är att göra bärandet av en ansiktsdator lite mer mänskligt, så levererar EyeSight.
Som sagt, om vi kommer att vänja oss vid människor som bär Vision Pro-headset – med sina digitala ögon bisarrt kikade ut från enhetens framsida – i en offentlig miljö återstår att se.