Alex Kipman vet godt hva maskinvare er. Siden han begynte i Microsoft for 16 år siden, var han den viktigste oppfinneren av over hundre patenter, inkludert den banebrytende bevegelsesdeteksjonsteknologien XboxKinect, som banet vei for noen av funksjonene i hans siste kreasjon, et holografisk 3D-headset kalt HoloLens.
Men i dag, sittende på kontoret sitt i Microsoft hovedkvarter i Redmond, Washington, snakker ikke Kipman om maskinvare. Han diskuterer forholdet mellom mennesker og maskiner fra et bredere filosofisk perspektiv. Uansett om vi samhandler med maskiner gjennom skjermer eller ting som sitter på hodet vårt, for ham er alt dette bare et "øyeblikk i tid."
Brasilianskfødte Kipman, en teknisk spesialist i Microsofts Windows and Devices Group, forklarer entusiastisk at en viktig fordel med teknologi er dens evne til å erstatte tid og rom. Han siterer eksemplet på "blandet virkelighet" (MR), en Microsoft-betegnelse for en blanding av den virkelige verden med datamaskingenerert grafikk. I følge Kipman vil det en dag usynlig kombinere augmented og virtual reality. Blant de mest slående trekk ved MR, sier han, er potensialet til å slippe løs "supermakter til erstatning" i den virkelige verden.
Folk legger spesiell verdi på følelsen du får når du fysisk deler plass med en annen person. Dette er grunnen til at Alice Bonasio fra FastCompany bestemte seg for å intervjue Kipman ansikt til ansikt. "Men hvis du kunne gjort denne typen samhandling uten å kaste bort tid på å bevege deg," sier Kipman, "livet ville være mye mer interessant." Videre fra første person.
"Datteren min kan kommunisere med brødrene sine i Brasil hver helg, og mine ansatte trenger ikke reise verden rundt for å gjøre jobben sin," fortsetter han.”Med bruk av kunstig intelligens kunne vi fortsette samtalen, men jeg ville ikke være her lenger. En dag skal du og jeg snakke, du skal være på Mars, og jeg vil være død i hundre år. Våre teknikeres jobb er å akselerere fremtiden og stadig lure på hvordan de skal gjøre det."
Microsoft banker på blandet virkelighet for å hjelpe oss med å komme inn i fremtiden. Og her går vi tilbake til maskinvaren igjen. Tilgjengeligheten av riktig enhet til riktig pris vil være en faktor for å avgjøre om forbrukerne omfavner blandet virkelighet (selv om det ikke er sannsynlig at enheter alene starter MR-revolusjonen, som VR har vist). Mens HoloLens er den eneste frittstående holografiske datamaskinen på markedet (i motsetning til OculusRift eller HTCVive hvis du ikke trenger å koble kabler til en ekstern enhet), tjener de smarte brillene på 3000 dollar som mer et bevis på konsept enn et forbrukerprodukt.
Nå ønsker Microsoft å endre det. Selskapet lanserer Windows Mixed Reality Headsets i høst, det første seriøse forsøket på å markedsføre konseptet til allmennheten. Selv om denne enheten fremdeles er nærmere en perfekt hybrid av utvidet og virtuell virkelighet, har den allerede legemliggjort hovedfunksjonene i HoloLens - som avanserte sporings- og kartleggingsfunksjoner - og tilbudt en rimeligere pris på 300-500 dollar. Headsettet vil være tilgjengelig i forskjellige former fra en rekke maskinvarepartnere, inkludert Dell, HP og Samsung, og lar brukerne lage 3D-rom som kan tilpasses med medier, apper, nettleservinduer og mer.
Ifølge Microsoft er implementering av en plattform som lar enhver generelt skape sin egen digitale verden det første trinnet i å oppnå det veldig spranget inn i morgendagens verden. "Hvis du tror, som vi gjør, at blandet virkelighet er den uunngåelige neste trenden innen databehandling, må du utnytte produktivitet, kreativitet, utdanning og et helt nytt spekter av underholdning, fra casual til hardcore gaming," sier Kipman.
Salgsfremmende video:
Forbedring av blandet virkelighet
Kipman er ikke den eneste optimistiske om blandet virkelighet. California-basert oppstart Avegant jobber med en plattform som presenterer detaljerte 3D-bilder ved å legge flere fokale plan, som selskapet kaller "lysfelt" -teknologi. "Søknadene er uendelige," sier Avegant administrerende direktør Jörg Tewis. Fra designere og ingeniører som direkte manipulerer 3D-modeller med hendene, til medisinprofessorer som illustrerer forskjellige hjertesykdommer ved å bruke et eksempel på en praktisk levende modell for studentene. Hjemme kan brukerne omgi virtuelle hyller med sine favorittprodukter. Blandet virkelighet gjør at folk kan samhandle direkte med ideene sine i stedet for skjermer og tastaturer."
For å gjøre alt dette, må enheter med blandet virkelighet støtte virtuelle bilder som vil fremstå som ikke kan skilles fra den virkelige verden og samhandle med det i ett stykke. I følge professor Gregory Welch, dataforsker ved University of Central Florida, har de fleste teknologiene som hittil er utviklet, ikke nådd denne likevekten ennå. "Blandet virkelighet er spesielt vanskelig fordi det verken er den skjulte ufullkommenheten til det virtuelle eller den virkelige slående renheten."
Han og kollegene fant at i noen tilfeller kan det relativt brede synsfeltet på den virkelige verden som HoloLens gir, skade en viktig følelse av tilstedeværelse. Mens en sunn person ser 210 grader, forsterker HoloLens-skjermen sentrum av synsfeltet med 30 grader eller så. I eksperimenter av Welch og teamet hans reduserte gapet mellom det virkelige og det utvidede landskapet følelsen av nedsenking og tilstedeværelse.
"Dette betyr at hvis du ser på en virtuell person foran deg (som tilfellet var i eksperimentet vårt), vil du bare se en del av ham flyte i verdensrommet foran deg," sier Welch. “Du må flytte hodet opp og ned for å 'tegne' oppfatningen av ham, siden du ikke kan se hele personen på en gang med mindre du ser på ham langveisfra (han vil fremstå som mindre). Problemet er at hjernen din stadig ser den "normale" verdenen rundt seg, og dette "overskriver" mange av de oppfatningstypene du ellers kan ha."
Welch fortsetter med å forklare at i demoene vi ser i dag med HoloLens eller Apple ARKit, kan for eksempel virtuelle objekter festes til en flat overflate, men utover den grunnleggende formen og det visuelle utseendet gjenkjenner programvaren vanligvis ikke mange viktige fysiske egenskaper ved objektet, som f.eks. vekt, massesenter og atferd, eller overflaten den ligger på - for ikke å nevne noen aktivitet i den virkelige verden som foregår rundt gjenstander.
"Hvis jeg ved et uhell ruller et par terninger av det virtuelle bordet, vil de ikke" falle "når de når kanten og spretter av som forventet basert på deres type og gulvmateriale," forklarer han.
I et papir som Welch var forfatter med professor Jeremy Baylinson, direktør for Virtual Human Interaction Lab (VHIL) ved Stanford University, la de frem noen av forskningsresultatene sine som viser at virtuelt innhold har mye høyere verdi når det viser atferd som vi gjør. forventer av fysiske objekter i den virkelige verden.
"I vårt laboratorium begynner vi å bruke HoloLens for å forstå forholdet mellom den utvidede virkelighetsopplevelsen og den påfølgende psykologiske relasjonen til det fysiske rommet," sier Beilinson. For eksempel forklarer han at eksperimentene hans viser at virtuelle mennesker som "vandrer som spøkelser" gjennom virkelige gjenstander, i stedet for å omgå eller prøve å unngå dem, blir oppfattet som mindre "ekte" enn de som overholder fysikkens lover.
Fremskritt i blandet virkelighet vil sannsynligvis gjøre hodesett rimeligere og lettere, men det er også mulig at i det minste noen av våre fremtidige interaksjoner med denne teknologien overhodet ikke inkluderer bærbar elektronikk. Spatial Augmented Reality (SAR), for eksempel utviklet av Welch for mange år siden, lar deg bruke projektorer for å endre utseendet til fysiske gjenstander rundt deg, for eksempel materialet i et bord eller fargen på en sofa - uten briller.
"Selvfølgelig vil ikke SAR fungere i alle situasjoner, men når den gjør det, vil det være overbevisende og enkelt," sier Welch. “Hvis det er noe magisk med når verden rundt deg forandrer seg, og du ikke har noe med det å gjøre - ingen headset, ingen telefon, ingenting. Du eksisterer bare i den fysiske verdenen, som praktisk talt forandrer seg rundt deg."
Virtuelt samarbeidsverktøy i den virkelige verden
Nonnie de la Peña, grunnlegger og administrerende direktør for Emblematic, var med på å sette VR i bruk som rapporteringsverktøy og til historiefortelling. Hun kalles "virtuell virkelighetens gudmor", og hun mener fordypningsteknologi er det nærmeste tingen å forestille seg et publikum - det vil si å sette den i stedet for en historieforteller. Hun mener HoloLens har potensialet til å øke kvaliteten og dybden i vår forståelse av verden, delvis takket være volumetrisk fangst, som skaper en 3D-modell av objekter ved bruk av flere kameraer og en grønn skjerm. "Microsoft begynte å tilby realisme på høyt nivå ved hjelp av volumetrisk fangst, og den ble umiddelbart plukket opp av journalister," sier de la Peña. Emblematics egen kreasjon, After Solitary, er en prisbelønnet dokumentar.opprettet i samarbeid med PBS og KnightFoundation, som brukte denne teknikken for å formidle essensen av traumet i en lang fengselsstraff.
Den største endringen som blandet virkelighet lover, er at innhold ikke blir bundet til noen bestemt enhet. MR bruker byggesteiner (objekter i den virkelige verden eller datamaskingenererte objekter) for å skape miljøer der mennesker kommer inn for videre samhandling. I denne sammenheng blir enheter et vindu som lar deg se på og få tilgang til disse verdenene, i stedet for et depot som lagrer ditt personlige innhold (som smarttelefonen din).
I disse delte virkelige / virtuelle miljøene, bemerker Kipman, skifter forholdet vårt til databehandling fra personlig til samarbeid - fra enheter som lagrer ditt eget personlige innhold til delte rom for teknologidrevet kreativitet. Kipman mener dette har store konsekvenser for hvordan vi skal utvikle applikasjoner i fremtiden. Hvis du for eksempel lager en virtuell statue og plasserer den som et hologram på toppen av et bord i stuen din, vil en annen person med en blandet reality-enhet se statuen din når de kommer inn i rommet og flytter den hvis de vil. Fordi innholdet ikke er lagret på enheten din, men i selve miljøet, definerer du objektene (både virkelige og virtuelle) som bor i den.
"Disse konseptene krever revurdering av operativsystemet i en blandet virkelighetssammenheng," sier Kipman. Du må bygge et fundament som går fra silisium til skyarkitektur for å realisere din egen flytting fra personlig databehandling til samarbeidende databehandling. Det vil ta tid,”smiler han.
Ilya Khel
