Inhoudsopgave:
Video: Honda GX22 Mixed Reality (Microsoft Hololens 2) (November 2024)
Toen Microsoft begin 2015 op een Windows 10-evenement de verrassende aankondiging aankondigde van een nieuw augmented reality (AR) -product, was de Microsoft HoloLens-headset zelf niet het eerste wat het publiek zag. Bij het onthullen van de nieuwe technologie aan de wereld, toonde Alex Kipman van Microsoft - maker van zowel de Microsoft Kinect-bewegingscontroller als de HoloLens - in plaats daarvan een logo voor Windows Holographic, het Windows 10-uitgelijnde softwareplatform dat de AR-ambities van Microsoft ondersteunt.
Meer dan twee jaar later is de software die het groeiende ecosysteem van AR-apparaten van Microsoft aandrijft, nog steeds de beste indicator van waar het bedrijf van plan is zijn "mixed reality" (MR) toekomst te nemen. Het heeft nu een andere naam; Microsoft heeft Windows Holographic omgedoopt tot Windows Mixed Reality, maar het doel is niet veranderd. Microsoft wil een interoperabel netwerk van AR-, VR- en mixed reality-headsets van verschillende fabrikanten bouwen, allemaal met elkaar in gesprek en met Windows 10 Universal Apps.
Deze aanpak kent drie punten: de hardware van Microsoft (HoloLens), de zich ontwikkelende softwarestack in het Windows Mixed Reality-platform en de hardwarepartnerschappen van Microsoft met Acer, Asus, Dell, HP en Lenovo om $ 299 te bouwen mixed reality-headsets met Windows 10. De eerste daarvan, de Acer Windows Mixed Reality Development Edition-headset, wordt al naar ontwikkelaars verzonden.
Wat is Mixed Reality?
Microsoft is niet het enige AR-bedrijf dat de term mixed reality is gaan gebruiken om onderscheid te maken tussen verschillende punten in het AR / VR-spectrum. Aan de ene kant heb je de monoculaire bril die je ziet van bedrijven zoals Vuzix en smartphone-gebaseerde AR populair gemaakt door apps zoals Pokemon Go.
Anderzijds zijn er de meer meeslepende verrekijker op het hoofd gemonteerde ervaringen (displays in beide ogen met een gezichtsveld van 360 graden) van apparaten zoals HoloLens, de ODG R-9-bril of de nog steeds ongeziene Magic Leap. In te vereenvoudigde termen, kun je denken dat AR overlappende informatie of virtuele objecten op een meer tweedimensionale manier toevoegt bovenop wat er voor je staat.
Maar het continuüm waarin dit soort technologieën bestaat, gaat dieper. Als je je een spectrum voorstelt met de fysieke wereld aan de ene kant en echte virtual reality aan de andere kant, zou het er zo uitzien:
Physical World -> Augmented Reality -> Mixed Reality <- Augmented Virtuality <- Virtual Reality
(Maak je op dit moment geen zorgen over augmented virtualiteit. We zijn er nog niet helemaal).
De industrie is momenteel verwikkeld in verwarrende terminologie, maar het scheiden van al het jargon is niet alleen belangrijk voor het begrijpen van het ecosysteem, maar ook voor het identificeren van alle punten waarop Microsoft van plan is het aan te sluiten. Als de visie van de technologiegigant uitkomt, kan de mixed reality-software van Microsoft worden gebruikt in headsets variërend van $ 299 tot $ 3.000, ingebed in consumenten- en enterprise-ervaringen op het gebied van gaming, e-commerce, industrieel ontwerp en productie, interactieve enterprise data visualisaties, medicijnen en daarbuiten.
Hoe je een Mixed Reality OS bouwt
Tijdens een recente briefing met Microsoft kreeg PCMag de kans om de nieuwe Acer-partnerheadset kort te bekijken. We hebben ook een uitsplitsing van de Windows Mixed Reality-softwarestack, inclusief enig inzicht in hoe Microsoft samenwerkt met OEM's om de headsets van $ 299 te bouwen, en wat de recente Windows 10 Creators-update voor Windows-apps met gemengde realiteit op een reeks verschillende computerapparaten.
Het Windows Mixed Reality-platform valt uiteen in een aantal verschillende lagen. Bovenaan de stapel staat het display op het hoofd (HMD) met zes vrijheidsgraden (6DoF), dat het ondersteunde niveau van driedimensionale beweging en positiebepaling weergeeft. De HoloLens maakt gebruik van wat Microsoft inside-out 6DoF noemt, wat betekent positiebepaling die gegevens van meerdere invoersensoren en camera's combineert met algoritmen om de ervaring soepel te houden.
Voor context ondersteunen ongebonden VR-headsets die een smartphonescherm gebruiken, inclusief Samsung Gear VR en Google Daydream View, momenteel 3DoF, ook wel pitch-yaw-roll genoemd. Tethered VR-headsets zoals Oculus Rift en HTC Vive hebben 6DoF-positietracking.
De Windows 10 Creators Update biedt ondersteuning voor 6DoF-motion control in de Acer en andere opkomende OEM-headsets. De Acer Windows Mixed Reality Development Edition bevat twee front-facing position tracking camera's en dubbele displays, in vergelijking met de vier camera's die u op de duurdere HoloLens vindt (de twee toegevoegde HoloLens-camera's worden gebruikt voor ruimtelijke mapping), maar alle vijf partners headsets ondersteunen 6DoF. Een update die later dit jaar komt, voegt ondersteuning toe voor geïntegreerde grafische chips in headsets met gemengde realiteit, hoewel de hardware een relatief recente Intel 7e generatie-chip nodig heeft om de update te krijgen.
De volgende lagen in de Windows Mixed Reality-stapel verwerken invoer, middleware en de applicatie-programmeerinterfaces (API's) voor gemengde realiteit en ruimtelijke perceptie. De invoerlaag verwerkt alle visuele, gyroscopische, spraak- en ruimtelijke invoergegevens die een AR / VR-apparaat op elk willekeurig moment verzamelt. Dit kan gegevens uit bronnen omvatten, waaronder coördinatiesystemen, blik en richting, gebaren, spraakinvoer, ruimtelijk geluid en ruimtelijke kaarten.
De middleware- en API-lagen zijn essentieel om te begrijpen hoe het platform verbinding begint te maken met de rest van het AR / VR-software-ecosysteem. De Windows Mixed Reality-ontwikkelaarsdocumentatie bevat al instructies voor het bouwen van holografische apps met behulp van populaire platforms, waaronder Unity (platformonafhankelijke ontwikkelengine), Vuforia (AR-ontwikkelplatform) en een middleware-protocol voor het bouwen van MR-apps met behulp van de Microsoft DirectX runtime.
Het platform is niet per se open - je moet spelen volgens de universele Windows App-regels van Microsoft - maar Microsoft biedt een aantal opties voor aansluiting op de MR-softwarestack. Een voorbeeld hiervan is Intel's Project Alloy VR-headsets, die later dit jaar worden verwacht, met een versie van Windows Mixed Reality-software.
De laatste lagen van de stapel voegen een aangepaste gebruikersinterface (UI) toe Microsoft noemt een 'shell', samen met cloudservices zoals Xbox Live-verificatie en -synchronisatie en samenwerkingsberichten via services zoals Skype. In de Acer Windows Mixed Reality Development Edition kregen we een korte blik op, de "shell" was in wezen een besturingssysteem opgezet als kamers in een huis.
De gebruiker kan vervolgens teleporteren naar verschillende kamers en verschillende apps starten die worden weergegeven als zwevende pictogrammen of een tegel op een muur bezetten. Dit kunnen eenvoudige apps zijn zoals Foto's, Films en TV, een Microsoft Edge, of zelfs een volwaardig Windows 10 Start-menu waar je doorheen zou kunnen navigeren, wat werkte met een Xbox-controller. Natuurlijk zijn er ook enkele leuke 3D-interactieve modelleringsmogelijkheden zoals bij HoloLens. Demovoorbeelden varieerden van olifanten en tijgers die rondzwierven tot een wuivende astronaut die je in de kamer kunt plaatsen, en een app die je in een 3D-zonnestelsel lanceert. Dit zijn slechts enkele voorbeelden, aangezien de OEM-headsets elke universele Windows-app kunnen uitvoeren. Vanuit software-perspectief ziet Microsoft al deze apparaten als Windows 10-computers voor je hoofd.
Het bedrijf kan op een gegeven moment een standaard Mixed Reality-hardwarespecificatie vrijgeven, maar op dit moment richt Microsoft zich op de softwarestack en co-engineering van de komende golf van partnerkoptelefoons. Als u de Windows 10-jubileumrelease (en de HoloLens Commercial Suite daarin) van naderbij bekijkt, ziet u ook de softwarefuncties die Microsoft heeft toegevoegd onder de motorkap om de voor bedrijven gerichte HoloLens aantrekkelijker te maken voor reguliere bedrijfsuitvoering.
De HoloLens Commercial Suite ondersteunt de basisfunctieset van de HoloLens Development Edition, waardoor bedrijven de headset met gemengde realiteit als gewoon een ander apparaat in hun IT-bedrijfsnetwerk kunnen behandelen. Microsoft heeft de HoloLens Commercial Suite afgelopen augustus uitgebracht voor een prijskaartje van $ 5.000, en voor die extra $ 2K krijg je functies zoals dieper mobile device management (MDM) met Microsoft Intune samen met Kiosk Mode, die de HoloLens rechtstreeks in een specifieke app zal lanceren ervaring voor een demo in een winkel in een winkelomgeving.
De Commercial Suite wordt ook geleverd met Microsoft BitLocker Drive Encryption en toegang tot virtual private network (VPN) bescherming, wat nu belangrijker is dan ooit. De glanzende hardware zal altijd meer aandacht krijgen, vooral als Asus, Dell, HP en Lenovo hun eigen partnerheadets in de komende maanden uitrollen. Maar houd de software goed in de gaten voor een duidelijk beeld van waar Microsoft's strategie voor mixed reality naartoe gaat.
