Möt Googles plattform för virtuell verklighet för nästa generation

Annons

I går, på Googles IO-konferens, visade Google framtiden för virtual reality - och det består inte bara av kartong. Detta är överraskande, eftersom Googles tidigare satsningar på rymden har varit lite halvhjärtade.

Missförstå mig inte: Google Cardboard, a minimalistisk VR-skal för smartphones är onekligen snyggt - men dess begränsningar är tydliga. Det är ett av Googles berömda 20% -projekt - ett arbete av kärlek av en handfull anställda, och det visar. Kartong har ett smalt synfält, rörelsesuddighet, ingen positionsspårning och sjukt latens. Det är ett recept för dålig nedsänkning och VR-sjukdom.

Google Kartong har inget pannband och det är inte ett tillsyn. Utan huvudrem är användarna att hålla det upp mot ansikten och tvinga dem att vända med sina torsos. Det bromsar dem med en märkbar fördröjning. Och det är okej - vi pratar om ett headset av kartong. Det är fortfarande ett värdefullt verktyg för att få människor till VR, men det är inte en spelväxlare.

Allt som börjar förändras. Google använder en icke-försumbar bråkdel av världens hjärnkraft och började vid årets IO-konferens att flexera något av detta i VR-rymden. Meddelandena är tre gånger.

• Först finns det en betydande förfining av kartongheadsetet.
• För det andra finns det en VR-kamera designad för att producera en sömlös 3D-upplevelse.
• Slutligen finns det Tango VR, en ny VR / AR-plattform byggd kring Googles gåtfulla 3D-avkännande surfplatta.

Redo? Låt oss gräva in.

Nytt kartongheadset

Den nya designen för Google Cardboard är en definitiv förbättring - den ger stöd för större telefoner (upp till sex tum), inkluderar iOS-stöd och lägger till en liten fysisk spak på sidan av headsetet för inmatning. Det är också utformat för att vara enklare att bygga och kontrollera.

Bortsett från det är det nästan samma historia: små linser utanför hyllan, ett kartongskal och massor av rörelsesjuka om du använder det för länge. Det här är en markant förbättring, men vi är ganska nära gränsen för skal av papp-stil, och Google har ett hållmönster tills de kan börja bygga något mer användbart.

VR-kamera

Den nya kameran som utvecklats i samband med GoPro, kallas Hoppa. Den består av 16 GoPro-kameror (total kostnad, cirka 10 000 dollar), arrangerade på ett cirkulärt plastfäste. Hittills så vardagligt: ​​liknande monteringar för producerar VR-video Samsung och Oculus tillkännager Mobile Gear-plattformen "Gear VR"Samsungs chefer och Oculus CTO John Carmack stod upp på scenen för att äntligen prata om ett hemlighetsprojekt som de har slitit på förra året som heter "Gear VR." Läs mer finns redan på marknaden. Där det blir riktigt coolt är den så kallade "Jump Assembler", en mjukvara som skapats av Google för att skära skurrande VR-artefakter.

För att förstå den här programvaran måste du förstå problemet som den försöker lösa. Oculus 'John Carmack talar om problem med 3D-panoramafångst.

"Vad de avslutar med att göra är att du har skivor tagna från flera kameror, så rakt framför att det är rätt stereo [...] och sedan här är det rätt för denna [vinkel]. Men det betyder att om du tittar på vad som var rätt för ögonen här, men du tittar ut ur ögonhörnet här, [...] är det inte rätt skillnad för ögonen. Och då, ännu värre, om du [rullar på huvudet] blir det all slags dåligt, eftersom det är inställt bara för ögonen rakt fram. “

Jump är ett sätt att fixa detta. Google använder maskinsynsteknik för att jämföra bilderna tillsammans och ta reda på scenens 3D-geometri. Programvaran använder denna rekonstruktion för att skapa ett rent, sömfritt perspektiv, med perfekt stereo från alla vinklar.

Google planerar att tillåta att den här typen av innehåll kan ses via YouTube med Google Kartong - men det finns inget ord om stöd för mer sofistikerade VR-headset som Oculus Rift.

Det är redan en enorm vinst. Ändå kan tekniken användas för att göra mer - mycket mer. Under demonstrationen visar Google den virtuella kameran som rör sig runt i ringen och uppdaterar perspektivet smidigt. Just nu bakar Google 3D-data till stereopanorama. Illusionen kommer att fungera från vilken rotation som helst, men kommer att gå sönder om du rullar på huvudet eller rör dig.

I framtiden kan Google dock visa dig den rekonstruerade 3D-geometrien direkt, vilket ger dig en full VR-videoupplevelse. Kanske en som stöder varje rotationsaxel, såväl som en betydande grad av positionsspårning. Detta är ännu inte implementerat, men det är en lockande möjlighet för ett stort steg framåt i VR-video.

Tango VR

Google Kartong har många problem, men även det bästa exemplet på mobil VR, Samsungs Gear VR-headset Samsung och Oculus tillkännager Mobile Gear-plattformen "Gear VR"Samsungs chefer och Oculus CTO John Carmack stod upp på scenen för att äntligen prata om ett hemlighetsprojekt som de har slitit på förra året som heter "Gear VR." Läs mer , har fortfarande en stor nackdel - ingen positionsspårning.

Rotationsspårning är ganska enkel. Du kan använda gyroskop för att upptäcka hur mycket ditt huvud vrider sig, och jordens magnetiska poler ger en bekväm referens för att förhindra drift. Detta motsvarar ett par dollar sensorer, som redan finns förinstallerade i de flesta smartphones.

Positionsspårning är en helt annan platta med poutine. Olika företag har hanterat problemet på olika sätt. Oculus använder en extern kamera kopplad till spårning av prickar på headsetet, vilket gör att den kan spåras med maskinsyn.

HTC och Valve tar en olika tillvägagångssätt för deras Vive-headset Valve & HTC tillkännager nya VR-headset som ska skickas till jul 2015Valves nya VR-headset är det bästa världen någonsin har sett. Har Oculus en chans? Läs mer , med många basstationer "fyr" med roterande trummor för att svepa hela rummet med laserljus. Spårarna på headsetet och styrenheterna är täckta av ljusgivare, som kan upptäcka (med extremt exakt tidtagning) när de slås av den lasern. Genom att kontrollera den exakta timingen och utföra några grundläggande geometriska beräkningar, alla tre sensorer kan samarbeta för att bestämma enhetens exakta position i rymden, relativt basen stationer.

Båda dessa metoder har fördelar, och vi kan diskutera deras relativa fördelar. Men båda har en nackdel som blir avgörande i den mobila världen: du behöver extern hårdvara för att spåra headsetet.

Naturligtvis är detta ett problem för ett mobilt headset. Hela poängen med mobil VR är att frigöra dig från kablar och infrastruktur som behövs för högupplösta desktopupplevelser. Så, vad kan vi göra åt det? Svaret, åtminstone enligt Google, är att använda en teknik som heter "Visual SLAM" (Samtidig plats och kartläggning) i samband med en djupsensor, för att spåra punkter i världen. Med detta skapas ett 3D-nätverk av miljön för att bestämma var enheten befinner sig i rymden relativt dess startposition.

Google har redan skickat en del tidig hårdvara med denna funktion i form av Tangotablett Google vill sätta en 3D-kamera på din smartphone - varförGoogles Project Tango tar med sig 3d-sensorer till mobila enheter. Här är vad vi vet hittills. Läs mer , som vi har behandlat här tidigare. Google tror att sensorn kan revolutionera hur vi interagerar med enheter. Som utvecklaren Johnny Lee säger det i videon nedan,

”I stället för att tvinga hela vårt liv i denna mycket lilla rektangel [av en smarttelefonskärm], Project Tango utvecklar teknologierna för att hjälpa allt och alla förstår exakt var de befinner sig är. Var som helst. Inte bara där det finns bra GPS-täckning, bra WIFI-täckning [...] De enheter vi använder kommer att dela vår förståelse för rymden. "

Denna teknik har spännande applikationer i virtual reality, och nyligen har Google börjat visa dem.

Det här är imponerande, men det är också tidiga dagar. Valve använder ett hylster från hylla för deras VR-upplevelse tillsammans med ärliga till gud NERF-vapen. Tabletten i sig är inte designad för VR - den är tung, den är hög latens och ergonomin är hemsk.

Som sagt, det kan vara den mest imponerande mobila VR-demo som världen någonsin har sett - strikt på grund av den positiva spårningen den ger. Headsetet låter dig röra dig fritt genom alla inomhusutrymmen (förutsatt att det finns tillräckligt med ljus för att kameran ska kunna se). Det öppnar upp några spännande möjligheter för applikationer med blandad verklighet.

Många av nackdelarna kommer snart att förbättras: Google har också meddelat att det samarbetar med processortillverkaren Qualcomm och har skapat en smartphone som innehåller hela projektet Tango-processort, samt hårdvaran som stöder den. Dessa smarttelefoner kommer att vara referensdesign för framtida Tango-kompatibel smartphone, som borde vara mycket bättre lämpade för VR-applikationer.

När det gäller själva positionsspårningen ser spårningen smidig ut. Men det som ser bra ut på en datorskärm kan känna sig annorlunda när du är inne i den. Microsofts HoloLens Fem frågor om Microsofts "Project HoloLens"Microsofts nya Augmented Reality-headset är väldigt spännande - men kan de lösa de grundläggande problemen med AR? Läs mer använder en liknande teknik för att positionera sig själv och har märkbara svårigheter i sin stabilitet.

I sin presentation nämner Johnny Lee att spårningen, under goda förhållanden, är korrekt ner till "några millimeter eller centimeter". Det är imponerande, men inte riktigt upp till sub-millimeterstandarden för virtuell verklighet. Det låter som om det kan ta en annan generation eller två innan spårningen är tillräckligt bra för att ge tethered desktop VR en körning för sina pengar.

Framtiden, drivs av Google

Om du tar allt detta tillsammans kan du börja se formen på något intressant som dyker upp på två eller tre år. Föreställ dig för ett ögonblick att några år från nu kommer nya smartphones med Tango-hårdvara, ett VR-hölster och en version av Android optimerad för VR med låg latens. I den framtiden skulle det inte vara ovanligt att se människor med säkerhet ströva ner gatan, telefon limmade på ansiktet, nedsänkt i sin egen förstärkta verklighet.

I den framtiden finns VR-kameror överallt, och du kan på ett ögonblick hoppa in VR-video från allt på jorden. VR är billigt, VR är allestädes närvarande, och VR är en genomgående bekväm, uppslukande upplevelse, tillgänglig för miljontals människor. Det är drömmen, och Google har fört den lockande nära verkligheten.

Vad tror du? Är du intresserad av VR-video? Kan du se dig själv köpa ett mobilt VR-headset? Låt oss veta i kommentarerna!