Styra Vision Pro AR/VR-headsetet: 6 handgester för att navigera i visionOS

Vision Pro ändrar paradigmet för hur människor navigerar och interagerar med programvara i blandad verklighet. Istället för att kräva otympliga fysiska kontroller förlitar sig Apples AR/VR-headset på sofistikerade inmatningsmekanismer som vi alla är födda med – våra händer och ögon.

Gör val, rulla, zooma, rotera, flytta runt saker och mer bara genom att titta på saker och utföra enkla handgester som påminner om Multi-Touch på iPhone.

Följ med för att utforska de sex grundläggande handgester som används i visionOS och lär dig hur din blick och händer gör Apples rumsliga dator sömlös och enkel.

Hur fungerar Vision Pros handgester?

Handgester i visionOS fungerar tillsammans med ögonspårning. Dina ögon ger inriktning och avsikt, och gester utlöser specifika handlingar. Vision Pro-funktionerna front-, sido- och bottenmonterade kameror för handspårning och infraröda sensorer inuti headsetet spårar dina ögon.

Du tittar på ett objekt på skärmen – som en knapp – för att markera det eller hålla blicken för att utöka den underliggande sammanhangsberoende menyn eller visa ett verktygstips. Med valet gjort, utför en gest som att nypa för att agera på den. Eftersom de externa kamerorna täcker ett brett synfält kan du utföra gester samtidigt som du vilar handen bekvämt i knät för att undvika ansträngning.

Apple har beskrivit sex vanliga typer av handgester för visionOS i en WWDC23 utvecklarsamtal om att designa hand- och ögoninteraktioner för rumslig input. Tillsammans med ögon för inriktning låter dessa handgester dig styra appar och interaktioner i hela systemet.

Knacka

Om du nyper ihop fingrarna utförs standardåtgärden på det valda objektet. Tänk på att nypa när det gäller att trycka på iPhone-skärmen eller klicka på din Macs mus eller styrplatta. Vissa visionOS-funktioner, som luftinmatning på det virtuella tangentbordet, kräver inte tryckgesten.

Dubbelklicka

Nyp ihop tummen och pekfingret två gånger i snabb följd för att utföra motsvarande dubbeltrycksgesten i operativsystem som iOS och iPadOS.

Nyp och håll

För ihop tummen och pekfingret och håll dem ett ögonblick för att utlösa denna gest. Nyp och håll i visionOS fungerar på samma sätt som långtryckning (tryck och håll) gest på din iPhone för att markera text eller ta fram den sammanhangsberoende menyn.

Flytta dina klämda fingrar för att flytta fönster och andra UI-element i visionOS. Om Safari är framför dig kan du också hålla handen i luften och bara svepa med fingret för att scrolla.

Nyp och dra

Nyp och dra-gesten används för att rulla. Samla bara fingrarna och snärta med handleden. Du kan rulla uppåt, nedåt, åt vänster eller höger genom att dra handen i valfri riktning.

Ju snabbare du rör din hand, desto snabbare rullar du. Du kan rulla webbsidor i Safari, e-postmeddelanden i Mail, dokument i Pages, kalkylblad i Excel, etc. Du kan använda nypa och dra gesten för att rulla innehåll i alla fönster på visionOS som stöder rullning.

Zoom

För att zooma in Safari, Foton och andra appar, nyp ihop tummen och pekfingrarna på båda händerna och flytta dem sedan utåt. Du kan använda den här gesten för att föra ett fönster i visionOS längre eller närmare, förstora bilder och mer. I Foton-appen kan du titta på en specifik del av en bild när du utför zoomgesten för att zooma in på den.

Rotera

För att rotera ett föremål, nyp ihop fingrarna med båda händerna nära varandra och flytta sedan ena handen uppåt och den andra nedåt. Du kan använda den här gesten för att rotera 3D-objekt i Quick Look, bilder i appen Foton, illustrationer i dokument och så vidare.

Ögon- och handspårning "fungerar bara" på Vision Pro

Precis som på iPhone tillhandahåller Apple ett grundläggande gestspråk för att navigera i hela visionOS-användargränssnittet och appar för augmented reality. Tredjepartsutvecklare kan utnyttja Apples officiella API: er för visionOS för att skapa och lägga till gester till sina appar.

Apple rekommenderar inte att skapa anpassade gester som krockar med systemet eller de som inte är lätta att förstå, utföra eller memorera.

Ögon- och handspårning i virtuella, förstärkta och blandade verklighetstillämpningar är inga nya funktioner. Vision Pro-headsetet implementerar dock dessa funktioner på Apples varumärkessätt. Som ett resultat är det smidigt och enkelt att navigera i visionOS med dina ögon och händer.