Microsoft visar nya HoloLens-demonstrationer vid Build-konferensen

Annons

Microsofts kommande HoloLens-headset är den första high-end augmented reality-enheten som har visats för allmänheten. Tyvärr har Microsoft varit så tätt att vi inte riktigt vet mycket om det.

I dag, kl Microsofts Build Developer Conference i San Francisco fick vi ett nytt lockande titt på tekniken. Demon i sig är glänsande men inte särskilt informativ. Vi kan dock välja ut några viktiga detaljer genom att läsa mellan raderna. I detta fall är det Microsoft valde att inte visa mer informativt än vad de gjorde.

Demon

Flera av HoloLens ingenjörer kom på scenen för att visa upp några av de nya demonstrationerna som de har utvecklat för hårdvaran. En demo sker som en rekreation av en ingenjörs deprimerande glesa lägenhet och täcker väggar och golv med virtuella appar och leksaker. En annan tar in vissa läkare för att visa en modell av en mänsklig kropp, och sedan tar den isär. Slutligen växer en kitrobot en uttrycksfull, virtuell överkropp och vecklar ut en stor statuspanel, så att den kan justeras i realtid.

Djävulen, detaljerna

Hittills så imponerande - men många av min första frågor om HoloLens Fem frågor om Microsofts "Project HoloLens"Microsofts nya Augmented Reality-headset är väldigt spännande - men kan de lösa de grundläggande problemen med AR? Läs mer förblir obesvarad. Så låt oss titta lite närmare.

Ocklusion

Känner demo lite iscensatt för dig? Titta noga på kamerans rörelser. Det är inte bara den vanliga brådskan som är mässa. Titta på demonstrationen igen och leta efter ögonblick där en människa passerar framför ett virtuellt objekt.

Det här kallas ocklusion, och det är ett svårt problem i den förstärkta verkligheten. För att göra detta fenomen korrekt måste HoloLens kartlägga världen snabbt och noggrant för att klippa personens silhuett ur den virtuella bilden. Annars kommer du att ha en djupkonflikt: din stereovision säger att det virtuella objektet är bakom personen, men det kommer att visas ovanpå dem. Som vi har lärt oss från virtuell verklighet är dessa typer av konflikter upprörande och förstör illusionen att föremålen du interagerar med är konkreta delar av världen.

Demo sträcker sig avsevärt för att förhindra detta. Du kan se kamerans operatör reagera när en av personerna på scenen rör sig mot ett virtuellt objekt och rör sig för att hindra dem från att överlappa varandra. Hela demot är koreografiskt utförligt. Att komma ur stolen i den första demonstrationen får killen på scenen att gå framför en virtuell robot - och bekvämt är kameran pekad någon annanstans i exakt det ögonblicket.

De krossar det bara några gånger. Under robotdemot passerar roboten kort framför några virtuella prickar på golvet, och en av presentatörerna kliver på dem. I båda fallen finns det en djupkonflikt: du fortsätter att se de virtuella punkterna genom de verkliga objekten, vilket innebär att Microsoft ännu inte har en lösning på problemet.

Vi kan se fler bevis på detta i samma demo, när en visualisering visas av headsetets karta över miljön. Om du ramar för-ram genom den och tittar noga kan du se att kartan är felaktig på flera sätt: bordet är på en upphöjd plattform, som blir en vag utbuktning på kartan. Roboten är också synlig på kartan, men bara som en liten klump. Kanterna på skrivbordet saknas. Du kan antagligen skylla på dessa problem på den begränsade upplösningen av Kinect-djupssensorn i headsetet. Hursomhelst finns det bara inte tillräckligt med precision här för att korrekt kunna tillsluta virtuella objekt.

Låt oss vara tydliga här: det här kan vara en showstopper. Syftet med HoloLens är att sömlöst kombinera verkliga och virtuella objekt på ett övertygande sätt. Ocklusion är en nödvändig del av illusionen. Ocklusion är en så kraftfull djupkod att att en enda vit linje till en video kan skapa en kraftfull 3D-effekt av sig själv.

Microsoft är helt klart medveten om detta. De visar tilltäppning i sitt reklammaterial. Men från deras demonstrationer ser det inte ut som de faktiskt kan göra det. Om Microsoft inte kan lösa det här problemet har de ingen produkt. Användare bor inte i utförligt koreograferade demos i tomma hem. De tolererar inte konstant, nedbrytande återgivningsfel. Jag är ärligt så förvånad över att mer av teknisk press inte talar om det här problemet. Jag är väldigt nyfiken på om Microsoft har någon plan för att lösa problemet.

Användargränssnitt

Varje gång jag tittar på en video som visar HoloLens UI, var frasen som fortsätter genom mitt huvud "Gör vi verkligen göra det igen?"

Med varje ny datorplattform, både PC och smartphones, går vi igenom en cykel med dåligt gränssnitt innan vi räknar ut det. Problemet är att de dåliga användargränssnitten är dåliga på exakt samma sätt, och de är dåliga på det sätt som HoloLens UI är dåligt. Jag önskar att vi för en gångs gång kunde känna igen mönstret och hoppa framåt till den goda delen. Så här gör HoloLens (och varje ny plattform) fel:

• Först försöker de skapa gamla paradigmer istället för att skapa nya. Tänk på de gamla Treo-smartphones som byggdes runt ett fysiskt tangentbord och en mus-emulerande pekare. HoloLens är exakt samma, med ditt huvud för att emulera en mus och fingret för att klicka. Heck, vid en tidpunkt "drar" ingenjören ett fönster genom att låsa det i huvudet, något som Oculus VR Guide för bästa metoder varnar uttryckligen mot. HoloLens är inte en PC, och att försöka använda en PC UI kommer inte att fungera.
• För det andra slås de in i de blanka delarna av gränssnittet och skapar utsmyckade, värdelös fluff. Kommer du ihåg Clippy? Microsoft Bob? Fuskläder på den gamla iOS-anteckningsappen? Det här är värdelöst visuellt rörig. Den virtuella hund- och fiskskålen och roboten är exakt samma sak. Hur många gånger måste vi göra det innan vi inser att minimalism är den enda bra idén?

Medan vi håller på med det, är själva ”hologramen” ett rörelse visuellt. De kan inte bestämma sig för om de är rena rutor eller fåniga, tecknade klatter. UI-elementen är alldeles för stora och kräver expansiva gester att använda, till och med att fysiskt gå runt, vilket är dålig design av många skäl.

Om det verkar som att jag är upprörd över detta beror det på att fördjupande användargränssnitt så småningom kommer att bli riktigt, riktigt cool en dag. HoloLens-gränssnittet som hittills har visats är en fullständig röra, och det är synd. Ett bra användargränssnitt är skillnaden mellan Treo och iPhone - mellan en IBM-stordator och den ursprungliga mus-och-tangentbord-datorn. Det är skillnaden mellan en leksak för nördar och en förändring i världen.

Formfaktor

Det finns en viktig nyhet. Microsoft tog med "hundratals" HoloLens-enheter till showen och visar dem för deltagarna. Förra gången Microsoft gjorde demos, fanns människor fast i skrymmande trådbundna headset. Headseten som användes på scenen var rekvisita som bara kunde visa en svart-vit bild med låg upplösning. Men presentatören säger tydligt att headseten "bara gillar de som du såg på scenen idag." I andra ord, Microsoft har framgångsrikt miniatyriserat HoloLens hårdvara för att passa i en bärbar formfaktor, vilket är bra Nyheter.

Här är en utvecklare erfarenhet av den nya hårdvaran:

”Jag gick" på byggarbetsplatsen "och de lägger över ritningarna på väggen. Då kunde jag se hur en dörr skulle se ut och märka att en balk var i vägen. Vi flyttade bort dörren och lägger sedan till ett lager med el och VVS och såg att ett rör nu var i vägen. Jag "tittade och lufta klickade" på röret och lämnade en röstanteckning för rörmokaren att flytta röret bort.

Sedan kom jag tillbaka i rollen som rörmokaren och hämtade min anteckning (den hänger där), tittade och klickade och hörde min egen inspelade röst.

Att bära enheten behöver lite vänja sig vid. Den var inte superjusterad och pressade lite på näsan. Men jag tror att jag kan justera det bättre i tid.

Det holografiska området är mindre omfattande än jag trodde. Det är en rektangel framför dina ögon men om du har en god sidosyn (som jag har) är det lite oroande eftersom hologrammet kommer att beskäras när du rör dig.

Sammantaget är det extremt imponerande och jag kan inte vänta med att utveckla det. ”

Medan författaren noterar att enheten fortfarande har ett lågt synfält verkar han imponerad av hårdvaran totalt sett, vilket är ett lovande tecken. Så småningom kommer AR att bli en mer kraftfull och flexibel ersättning för VR - vilket redan är en fantastisk teknik Varför Virtual Reality Technology kommer att blåsa ditt sinne om 5 årFramtiden för virtual reality inkluderar spårning av huvud, ögon och uttryck, simulerad beröring och mycket mer. Dessa fantastiska tekniker kommer att finnas tillgängliga om fem år eller mindre. Läs mer . Den stora frågan är - hur långt borta är vi?

Utvecklare Support

Även om det inte nämndes i tillkännagivandevideoen tillkännagav Microsoft det också via deras partnerskap med Enhet, det kommer också att finnas fullt stöd för HoloLens in Unity, ett av de vanligaste verktygen som används för indie-spel utveckling. Stödet kommer att inkludera förmågan att göra igenom HoloLens och att få input från enheten på olika sätt. Både Unity Free och Unity Pro kommer att ha gratis HoloLens-stöd. Medan integrationen ännu inte är klar, ger Microsoft redan korta kurser på Build konferens med prototypen Unity-integrationer, för att ge utvecklarna en första titt på vad som kodar för AR kommer vara som.

Detta är en välkommen men inte ett överraskande drag. Alla nya plattformar lever eller dör på kvaliteten på lanseringsinnehållet, och HoloLens kommer inte att vara något undantag. Dessutom har Microsoft alltid varit engagerad i utvecklarrelationer.

Prototyp feber

HoloLens går långsamt mot kommersiell verklighet. Jag har djupa reservationer om vissa av maskinvarans begränsningar, men enheten är onekligen cool 8 verkliga användningsområden för Microsoft HoloLensMicrosofts HoloLens är cool, men vad kommer du faktiskt att använda den till? Vi kör ner de mest spännande möjligheterna. Läs mer , och något liknande kommer en dag att vara mycket användbart. Är du upphetsad för HoloLens?Fick du chansen att prova en på konferensen? Vill du bara ha en virtuell fiskskål? Låt oss veta i kommentarerna!