Maak kennis met het next-generation virtual reality-platform van Google

Gisteren toonde Google tijdens de IO-conferentie van Google de toekomst van virtual reality - en het is niet allemaal opgebouwd uit karton. Dit is verrassend, omdat Google's eerdere ondernemingen in de ruimte, nou ja, een beetje halfslachtig waren.

Begrijp me niet verkeerd: Google Cardboard, een minimalistische VR-shell voor smartphones is onmiskenbaar netjes - maar de beperkingen zijn duidelijk. Het is een van Google's beroemde 20% -projecten - een liefdeswerk van een handjevol medewerkers, en dat blijkt ook. Karton heeft een smal gezichtsveld, bewegingsonscherpte, geen positionele tracking en ziekmakende latentie. Het is een recept voor slechte onderdompeling en VR-ziekte.

Google Cardboard heeft geen hoofdband en dat is geen overzicht. Zonder een hoofdband moeten gebruikers het tegen hun gezicht houden en hen dwingen met hun torso te draaien. Dat vertraagt ​​ze met een merkbare vertraging. En dat is goed - we hebben het hier over een hoofdtelefoon gemaakt van karton. Het is nog steeds een waardevol hulpmiddel om mensen naar de VR te halen, maar het is geen game-wisselaar.

Dat begint allemaal te veranderen. Google heeft een niet-verwaarloosbaar deel van de denkkracht in de wereld in gebruik en op de IO-conferentie van dit jaar begon hij wat van dat potentieel in de VR-ruimte te buigen. De aankondigingen zijn drievoudig.

• Ten eerste is er een aanzienlijke verfijning van de Cardboard-headset.
• Ten tweede is er een VR-camera ontworpen om een ​​naadloze 3D-ervaring te produceren.
• Ten slotte is er Tango VR, een nieuw VR / AR-platform dat is gebouwd rond de enigmatische 3D-detectietablet van Google.

Klaar? Laten we ingaan.

Nieuwe kartonnen headset

Het nieuwe ontwerp voor Google Cardboard is een duidelijke verbetering - het voegt ondersteuning toe voor grotere telefoons (tot zes inch), omvat iOS-ondersteuning en voegt een kleine fysieke hendel toe aan de zijkant van de hoofdtelefoon voor invoer. Het is ook ontworpen om eenvoudiger te bouwen en te besturen.

Afgezien daarvan is het ongeveer hetzelfde verhaal: kleine lenzen, een kartonnen omhulsel en veel bewegingsziekte als je het te lang gebruikt. Dit is een duidelijke verbetering, maar we zijn redelijk dicht bij de limiet voor shells in kartonnen stijl, en Google heeft een vasthoudpatroon totdat ze iets nuttigs kunnen gaan bouwen.

VR-camera

De nieuwe camera die is ontwikkeld in samenwerking met GoPro, wordt de Springen. Het bestaat uit 16 GoPro-camera's (totale kosten, ongeveer $ 10.000), gerangschikt op een ronde plastic houder. Tot nu toe, zo alledaags: vergelijkbare mounts voor het produceren van VR-video Samsung en Oculus melden "Gear VR" Mobile VR-platform Samsung en Oculus kondigen "Gear VR" Mobile VR-platform aan Samsung executives en Oculus CTO John Carmack stond op het podium om eindelijk te praten over een geheim project waar ze het afgelopen jaar mee worstelden, genaamd "Gear VR." Lees meer zijn al op de markt. Waar het echt cool wordt, is het zogenaamde “Jump Assembler,” een stukje software gemaakt door Google om schokkende VR-artefacten te verwijderen.

Om deze software te begrijpen, moet je het probleem begrijpen dat het probeert op te lossen. Oculus 'John Carmack vertelt over de problemen met panoramische 3D-opname.

“Wat ze uiteindelijk doen, is dat je plakjes hebt genomen van meerdere camera's, dus recht vooruit is het de juiste stereo [...] en dan is het hier juist voor deze [hoek]. Maar dat betekent dat als je kijkt naar wat goed was voor de ogen hier, maar vanuit je ooghoek hier naar kijkt, het [...] niet de juiste ongelijkheid voor de ogen is. En dan, erger nog, als je [je hoofd rolt], wordt het allemaal erg slecht, omdat het recht voor de ogen rechtop gezet is. “

Springen is een manier om dit op te lossen. Google maakt gebruik van machine vision-technologie om de beelden met elkaar te vergelijken en de 3D-geometrie van de scène te bepalen. De software gebruikt deze reconstructie om een ​​schoon, steekvrij perspectief te creëren, met perfecte stereo vanuit elke hoek.

Google is van plan om dit soort inhoud via YouTube te laten bekijken met Google Cardboard - hoewel er nog geen woord is over ondersteuning voor meer geavanceerde VR-headsets zoals de Oculus Rift.

Dat is al een grote overwinning. Toch kan de technologie worden gebruikt om meer te doen - nog veel meer. Tijdens de demo toont Google de virtuele camera die zich in de ring verplaatst en het perspectief probleemloos bijwerkt. Op dit moment bakt Google de 3D-gegevens in stereo-panorama's. De illusie werkt vanuit elke rotatie, maar wordt afgebroken als je je hoofd rolt of rondloopt.

In de toekomst zou Google u de gereconstrueerde 3D-geometrie echter direct kunnen laten zien, zodat u een volledige VR-videobeleving krijgt. Misschien een die elke rotatie-as ondersteunt, evenals een aanzienlijke mate van positionele tracking. Dit is nog niet geïmplementeerd, maar het is een verleidelijke mogelijkheid voor een grote stap voorwaarts in VR-video.

Tango VR

Google Cardboard heeft veel problemen, maar zelfs het beste voorbeeld van mobiele VR, Samsung Gear VR-headset Samsung en Oculus melden "Gear VR" Mobile VR Platform Samsung en Oculus kondigen "Gear VR" Mobile VR-platform Samsung executives en Oculus CTO John Carmack aan stond op het podium om eindelijk te praten over een geheim project waar ze het afgelopen jaar mee worstelden, genaamd 'Gear VR'. Meer lezen, heeft nog steeds een groot nadeel - geen positionele tracking.

Rotatievertraging is vrij eenvoudig. Je kunt gyroscopen gebruiken om te detecteren hoeveel je hoofd draait en de magnetische palen van de aarde bieden een handige verwijzing om drift te voorkomen. Dit komt neer op een paar dollars aan sensoren, die al op de meeste smartphones voorgeïnstalleerd zijn.

Positioneel volgen is een heel ander plaatje van poutine. Verschillende bedrijven hebben het probleem op verschillende manieren aangepakt. Oculus gebruikt een externe camera die is gekoppeld aan het volgen van punten op de headset, zodat deze kan worden gevolgd met behulp van machinevisie.

HTC en Valve kiezen voor een andere aanpak voor hun Vive-headset Valve & HTC kondigen nieuwe VR-headset aan voor de kerst 2015 Valve & HTC kondigen nieuwe VR-headset aan tegen kerst 2015 De nieuwe VR-headset van Valve is de beste die de wereld ooit heeft gezien. Krijgt Oculus een kans? Meer lezen, veel gebruiken “Vuurtoren” basisstations met roterende trommels om de hele kamer met laserlicht te vegen. De trackers op de headset en de controllers zijn bedekt met lichtsensoren die (met uiterst nauwkeurige timing) kunnen detecteren wanneer ze door die laser worden geraakt. Door de precieze timing te controleren en enkele elementaire geometrische berekeningen uit te voeren, kunnen drie sensoren samenwerken om de exacte positie van het apparaat in de ruimte te bepalen, in verhouding tot de basisstations.

Beide benaderingen hebben voordelen en we kunnen hun relatieve verdiensten bespreken. Beide hebben echter een nadeel dat cruciaal wordt in de mobiele wereld: u hebt externe hardware nodig om de headset bij te houden.

Onnodig te zeggen dat dit een probleem is voor een mobiele headset. Het hele punt van mobiele VR is om jezelf te bevrijden van de kabels en infrastructuur die nodig zijn voor een betere desktopervaring. Wat kunnen we eraan doen? Het antwoord is, volgens Google, om een ​​technologie te gebruiken die wordt genoemd “Visual SLAM” (Simultane Location and Mapping) in combinatie met een dieptesensor om punten in de wereld te volgen. Hiermee wordt een 3D-maas van de omgeving gemaakt om te bepalen waar het apparaat zich in de ruimte ten opzichte van de startpositie bevindt.

Google heeft al wat vroege hardware met deze functionaliteit geleverd in de vorm van de Tango-tablet Google wil een 3D-camera op je smartphone plaatsen - Hier is waarom Google een 3D-camera op je smartphone wil plaatsen - Hier is Waarom Google's Project Tango brengt 3d-sensoren voor mobiele apparaten. Dit is wat we tot nu toe weten. Lees meer, wat we hier eerder besproken hebben. Google denkt dat de sensor een revolutie teweeg kan brengen in de manier waarop we omgaan met apparaten. Zoals ontwikkelaar Johnny Lee het in de video hieronder zet,

“In plaats van ons hele leven in deze zeer kleine rechthoek [van een smartphonescherm] te forceren, ontwikkelt Project Tango de technologieën om alles en iedereen te helpen precies te begrijpen waar ze zich bevinden. Overal. Niet alleen waar er goede GPS-dekking is, goede WIFI-dekking [...] De apparaten die we gebruiken zullen ons begrip van de ruimte delen.”

Deze technologie heeft geweldige toepassingen in virtual reality en sinds kort begint Google ze te laten zien.

Dit spul is indrukwekkend, maar het zijn ook vroege dagen. Valve gebruikt een standaard holster voor hun VR-ervaring samen met eerlijk-tegen-God NERF-geweren. De tablet zelf is niet ontworpen voor VR - het is zwaar, het heeft een hoge latentie en de ergonomie is vreselijk.

Dat gezegd hebbende, het is misschien wel de meest indrukwekkende mobiele VR-demo die de wereld ooit heeft gezien - uitsluitend vanwege de positionele tracking die deze biedt. Met de headset kun je vrij bewegen, door elke binnenruimte (mits er genoeg licht is om de camera te kunnen zien). Dat biedt een aantal opwindende mogelijkheden voor toepassingen met gemengde realiteit.

Veel van de nadelen zullen binnenkort verbeteren: Google heeft ook aangekondigd dat het samenwerkt met Qualcomm, de ontwikkelaar van de processor, en een smartphone heeft gemaakt met het volledige project Tango-processorsuite plus de hardware om dit te ondersteunen. Deze smartphone is een referentieontwerp voor een toekomstige Tango-compatibele smartphone, die veel beter geschikt zou moeten zijn voor VR-toepassingen.

Wat het positionele volgen zelf betreft, ziet het volgen er glad uit. Maar wat er goed uitziet op een computerscherm kan anders aanvoelen als je erin zit. Microsoft's HoloLens vijf vragen over Microsoft's "Project HoloLens" Vijf vragen over Microsoft's "Project HoloLens" De nieuwe Augmented Reality-headset van Microsoft is erg opwindend - maar kunnen ze de fundamentele problemen van AR oplossen? Read More maakt gebruik van een vergelijkbare technologie om zichzelf te positioneren, en heeft merkbare fouten in de stabiliteit.

In zijn presentatie vermeldt Johnny Lee dat het volgen, onder goede omstandigheden, tot op de juiste is “een paar millimeter of een centimeter”. Dat is indrukwekkend, maar niet helemaal volgens de submillimeterstandaard voor virtual reality. Het klinkt alsof het nog een generatie of twee duurt voordat de tracking goed genoeg is om aangebonden desktop VR een run voor zijn geld te geven.

De toekomst, mogelijk gemaakt door Google

Als je dit allemaal samen neemt, kun je de vorm van iets interessants beginnen te zien ontstaan ​​in twee of drie jaar. Stel je eens voor dat een paar jaar vanaf nu nieuwe smartphones worden geleverd met Tango-hardware, een VR-holster en een versie van Android die is geoptimaliseerd voor VR met lage latentie. In die toekomst zou het niet ongebruikelijk zijn om mensen vol vertrouwen door de straat te zien lopen, hun telefoon aan hun gezicht te kleven, ondergedompeld in hun eigen augmented reality.

In die toekomst zijn VR-camera's overal en kun je in een moment in VR-video springen van alles op aarde. VR is goedkoop, VR is alomtegenwoordig en VR is een consistent comfortabele, meeslepende ervaring die beschikbaar is voor miljoenen mensen. Dat is de droom, en Google heeft het verleidelijk dicht bij de realiteit gebracht.

Wat denk je? Ben je geïnteresseerd in VR-video? Zie je jezelf een mobiele VR-headset kopen? Laat het ons weten in de comments!

Ontdek meer over: Google, Video opnemen, Virtual Reality, Wearable Technology.