Azure Object Anchors – objektforståelse med HoloLens.
Azure Object Anchors er et Azure rammeverk som muliggjør automatisk gjenkjenning av objekter, uten bruk av manuell justering eller bruk av QR koder.
Bouvet, som Mixed Reality Partner, fikk tidlig tilgang til Azure Object Anchors. Teknologien muliggjør avansert objektforståelse for HoloLens.
Vi har lenge vært vant med at mobiler forstår hva slags objekter den kan se. Dette ser vi for eksempel ved filtere i Snapchat eller på Facebook Messenger. HoloLens har, frem til nå, manglet en forståelse for hvilke objekter den ser på, med mindre man bruker QR-koder, eksterne API-er, Azure-tjenesten som omhandler bildebehandling, eller andre markører for å vise den.
Azure Object Anchors endrer dette. Dette er et Azure-rammeverk utviklet direkte mot HoloLens som muliggjør automatisk gjenkjenning av objekter, uten bruk av manuell justering eller QR koder. Best av alt - dette foregår uten behov for internettilgang.
Hvordan man tar man objektforståelse i bruk?
Objektforståelse foregår i to deler; trening og utøvelse.
Trening
HoloLens-enheten må forstå hva slags objekt den skal oppdage. Den trener ved å bruke en 3D-modell av objektet. Denne 3D-modellen kjøres gjennom Azure sin skybaserte opplæringsmodul. Deretter mottas ei fil med referanser som HoloLens bruker for å vite hva slags objekt den skal forstå.
Utøvelse
Steg to er å legge til treningsfilen på HoloLens-enheten, sammen med programvaren. Dermed kan man spore fysiske objekter i sanntid og legge informasjon over, uten bruk av eksterne markører.
.jpg)
Hvilke muligheter gir objektforståelse?
Det å vise kontekstdetaljer er en sentral del av det å utvide, eller fremheve, virkeligheten. Fordi man viser dette basert på hvor brukeren er og hva som sees, etter det brukeren ønsker å oppnå.
En stor fordel med å bruke HoloLens er at man kan ha begge hender fri så man kan arbeide samtidig. Dataoppslag angående gjøremål vises i form av hologrammer på linsa i brukerens synsfelt.
Dette gir muligheter til opplæring og for arbeidsoppgaver, trening eller visuell inspeksjon. I et produksjonslokale kan man gå opp til en maskin, og få maskinens dokumentasjon i form av hologrammer. Eller, man kan direkte få avlesing av live-data som maskinen genererer (trykk, last, produksjonskapasitet eller lignende).
Proof of Concept - batteristatus i El-bil
I vårt testprosjekt ønsket vi å visualisere EL-bilens gjenværende batteri-status, og forankre batterigrafikken der hvor batteriet ligger på den fysiske bilen. Samtidig ønsket vi å gjøre kall på bilens API for enkel manipulering av bilen.
AOA har fra starten av vært ment å brukes i sammenheng med andre API-er, blant annet Azure Remote Rendering, som brukes til å vise komplekse 3D-modeller i sanntid på begrensede plattformer via fjernrendring i skyen. I videoen ser du teknologiene samhandle, med aktiv tilknytning til Tesla-API-et.
Endelig har HoloLens et grundig og solid system for objektforståelse, kontakt oss i dag for å ta det i bruk eller utfordre oss på andre muligheter med Mixed Reality teknologi.
Referanser:
Kontaktpersoner
