Alex Kipman ved, hvad hardware. Han kom til Microsoft for 16 år siden, han var chef opfinderen af hundredvis af patenter, herunder innovative teknologi, motion detection XboxKinect, som banede vejen for, at nogle af de funktioner, der i sin seneste kreation — holografiske 3D-headset kaldet HoloLens.
Men i dag, der sidder i sit kontor på Microsofts hovedkvarter i Redmond, Washington, Forenede Kipman ikke at tale om hardware. Han diskuterer forholdet mellem mennesker og maskiner med en bredere filosofisk synspunkt. Uanset om vi interagerer med maskiner gennem skærme eller ting, der sidder på vores hoveder, for det er bare “point-in-time”.
Født i Brasilien, Kipman som teknisk specialist i WindowsandDevicesGroup hos Microsoft, entusiastisk forklarer, at en væsentlig fordel ved teknologien er dens evne til at fortrænge tid og rum. Han nævner eksemplet med “mixed reality” (MR, mixedreality), udtrykket Microsoft, som repræsenterer en blanding af den virkelige verden med computer-genereret grafik. Ifølge Kipman, hun en dag vil forene usynligt augmented og virtual reality. Han sagde, at der blandt de mest slående særlige MR — potentiale til at udløse en “super substitution” i den virkelige verden.
Folk tillægger særlig værdi til den følelse, du oplever, når du er fysisk dele plads med en anden person. Det er derfor, Alice Bonasio fra FastCompany besluttet at interviewe Chipman ansigt-til-ansigt. “Men hvis du havde mulighed for at gennemføre denne form for interaktion uden at bruge den nødvendige tid til at rejse, siger Kipman, livet ville være så meget mere interessant.” Yderligere, i første person.
“Min datter kan kommunikere med deres brødre i Brasilien hver weekend, og mine medarbejdere ikke behøver at rejse verden til at gøre mit arbejde,” fortsætter han. “Med fremkomsten af kunstig intelligens, som vi kunne fortsætte samtalen, men jeg ville ikke være her. En dag, du og jeg vil tale, og du vil være på Mars, og jeg vil være hundrede år døde. Vores arbejde teknikere til at fremskynde fremtiden og hele tiden spekulerer på, hvordan at gøre det.”
Microsoft satser på mixed reality til at hjælpe os med at komme til fremtiden. Og her er vi tilbage til hardware. Tilgængeligheden af den rigtige enhed til den rigtige pris vil være den faktor, der vil afgøre, om forbrugerne tage mixed reality (selv om nogle af de enheder, der i sig selv er usandsynligt, at starte en revolution, MR, som det fremgår af eksempel VR). Selv om HoloLens er det kun enkeltstående holografisk computer på markedet (i modsætning til OculusRift eller HTCVive hvis du ikke ønsker at tilslutte kabler til den eksterne enhed), smart-briller koster $ 3000 er mere proof of concept end en forbrugsvare.
Nu er Microsoft ønsker at ændre det. Dette efterår selskabet lancerer headsettet Windows Mixed Reality-Headset, som vil være det første seriøse forsøg på at sælge konceptet til offentligheden. Selv om denne enhed er stadig tættere på en perfekt hybrid af augmented og virtual reality, er det allerede indeholdt de vigtigste funktioner i HoloLens — som avancerede muligheder for sporing og kortlægning, og der foreslås en mere overkommelig pris på 300-500 kroner. Headsettet vil være tilgængelig i forskellige former fra forskellige partnere hardware, herunder Dell, HP og Samsung, og vil give brugerne mulighed for at oprette tre-dimensionelle rum, der kan være personlig gennem medier, programmer, browser-Vinduer, og andre.
Siger Microsoft, platform, der giver alle mulighed for at skabe deres egen, digitale verden, er det første skridt i at opnå springet ind i verden af i morgen. “Hvis du tror, da vi som mixed reality er det uundgåelige næste trend inden for it, er du nødt til at tilslutte produktivitet, kreativitet, uddannelse og en helt ny vifte af underholdning, fra afslappet til hardcore spil,” siger Kipman.
Forbedring af mixed reality
Kipman ikke den eneste tale om en blandet virkelighed. Californien start Avegant arbejder på en platform, der giver en detaljeret tre-dimensionelle billeder, lagdeling en masse af focal fly, som selskabet kalder teknologi “light field”. “Uendelige applikationer,” siger Avegant CEO Joerg Tewes. “Designere og ingeniører til direkte at manipulere 3D-modeller, som med deres hænder, at professorer i medicin, der illustrerer forskellige hjerte-sygdomme, for eksempel, er næsten en levende model til mine elever. Hjemme-brugere, kan surround de virtuelle hylder af deres favorit-produkter. Mixed reality giver folk mulighed for at interagere direkte med deres ideer i stedet for at skærme og tastaturer”.
At gøre alt dette, mixed reality-enhed skal understøtte virtuelle billede, som synes umulig at skelne fra den virkelige verden og problemfrit interagere med det. Ifølge Professor Gregory Welch, en datalog fra University of Central Florida, de fleste af de teknologier, der er udviklet til dato, har endnu ikke nået at ligevægt. “Mixed reality er særlig vanskelig, fordi der er nogen skjule mangler i den virtuelle eller den slående renhed af det rigtige.”
Sammen med kolleger, som han fandt, at der i nogle tilfælde en relativt bredt felt af mening i den virkelige verden, som giver HoloLens, kan skade vigtige følelse af tilstedeværelse. Mens en sund person ser 210 grader, displayet HoloLens øger centrum af dit synsfelt til 30 grader eller deromkring. I forsøg udført af Welch og hans hold, og forskellen mellem den virkelige og den udvidede landskab har reduceret følelse af fordybelse og nærvær.
“Det betyder, at hvis man ser på den virtuelle menneskelige foran ham (som det var tilfældet i vores eksperiment), vil du kun se en del af det svævende i rummet foran dig,” siger Welch. “Du bliver nødt til at bevæge hovedet op og ned for at “trække” den opfattelse af ham, fordi du ikke kan se det hele menneske på én gang, medmindre vi ser på det fra lang afstand (det ville virke mindre). Problemet er, at din hjerne altid ser “normale” verden omkring dem, og det “overskriver” de mange typer af perception, som du ellers ville have.”
Welch forklarer yderligere, at de demonstrationer, som vi ser i dag med HoloLens og Apple ARKit, for eksempel virtuelle objekter kan fastgøres på en flad overflade, men i tillæg til den grundlæggende form og det visuelle indtryk af den software, der normalt ikke kan genkende mange vigtige fysiske egenskaber for det objekt, såsom vægt, tyngdepunkt, og adfærd, eller den flade, hvor det er beliggende, for ikke at nævne nogen aktivitet i den virkelige verden, som opstår omkring objekter.
“Hvis jeg ved et uheld mister et par terninger fra den virtuelle tabel, at de ikke “falder ned”, når den kant, og vil ikke hoppe, som ville være forventet, baseret på deres type og gulv materiale”, forklarer han.
I det arbejde, der Welch skrev sammen med Professor Jeremy Beilinson, Direktør for Virtual Human Interaction Lab (VHIL) ved Stanford University, de præsenterede nogle af deres resultater, som viser, at den virtuelle indhold har en meget højere værdi, når den udviser den adfærd, vi forventer af fysiske objekter i den virkelige verden.
“I laboratoriet er vi vil bruge HoloLens til at forstå forholdet mellem augmented reality-oplevelser og efterfølgende psykologiske holdning i forhold til det fysiske rum,” siger Beilinson. For eksempel forklarer han, at hans eksperimenter viser, at virtuelle mennesker, der “er som spøgelser” ved hjælp af virkelige objekter, og ikke omgå dem eller forsøge at undgå, er opfattet som mindre “virkelige” end dem, der adlyde de af fysikkens love.
Fremskridt inden for mixed reality, som mest sandsynligt vil føre til, at disse headset vil blive mere tilgængeligt og nemmere, men det er også muligt, at i det mindste nogle af vores fremtidige interaktioner med denne teknologi vil gøre det muligt for bærbar elektronik. “Fysisk augmented reality” (SAR), for eksempel, Welch udviklet for mange år siden, tillader brug af projektorer til at ændre udseendet af de fysiske objekter omkring dig, som et materiale farve af en tabel eller sofaen — uden mine briller.
“Selvfølgelig, SAR, vil ikke fungere i alle situationer, men når det er, det er tydeligt og let,” siger Welch. “Hvis der er noget magisk er, når verden omkring dig er i forandring, og at du ikke har at gøre med dette — ingen headset, ingen telefon, intet. Du skal blot eksisterer i den fysiske verden, der ændrer sig omkring dig.”
Et virtuelt værktøj til samarbejde i den virkelige verden
Nonnie de La peña, grundlægger og Administrerende direktør for virksomheden Karakteristiske, og hjalp til at bringe anvendelsen af virtual reality som et værktøj til rapportering og fortæller historier. Det kaldes “the godmother of virtual reality”, og hun mener, at teknologi fordybelse er det tætteste, man kan forestille sig den slags publikum — der er, for at sige det i stedet for fortælleren. Hun mener, at HoloLens har potentiale til at øge kvaliteten og dybden af vores forståelse af verden, dels på grund af den metode til volumetrisk fange, som skaber en tre-dimensionel model af objekter gennem flere kameraer og en grøn skærm. “Microsoft er begyndt at tilbyde et højt niveau af realisme ved hjælp af lydstyrke-fange, og han blev straks samlet op af journalister,” siger de La peña. Egen skabelse, Symbolske, Efter Ensom, dette prisbelønnede dokumentarfilm, skabt i samarbejde med PBS og KnightFoundation, som anvendes denne teknik til at formidle essensen af psykiske traumer, langvarig fængselsstraf.
Den vigtigste ændring, som lover en mixed reality, er, at indholdet vil ikke være bundet til nogen bestemt enhed. HR. bruger byggesten (objekter i den virkelige verden eller computer-genereret) at skabe miljøer, som omfatter mennesker for yderligere interaktion. I denne forbindelse, enheden bliver et vindue, der giver dig mulighed for at se ind i disse verdener og få adgang til dem, og ikke et depot til opbevaring af dit personlige indhold (fx din smartphone).
Kipman bemærker, at disse fælles real/virtuelle miljøer, vores forhold til computere ændret sig fra personlig til fælles, fra enheder, der holder dine egne brugerdefinerede indhold til den fælles rum for kreativitet, medieret af teknologi. Chipman mener, at dette har stor betydning for, hvordan vi vil udvikle applikationer i fremtiden. For eksempel, hvis du opretter en virtuel statue og sætte det i form af et hologram over bordet i sin stue, en anden person med en enhed i en mixed reality vil se din statue når du træder ind i rummet, og flytte det, hvis du vil. Fordi indholdet gemmes ikke på enheden, og i selve mediet, der definerer objekter (både virkelige og virtuelle), som lever i det.
“Disse begreber opkald til en nytænkning af operativsystemet i forbindelse med mixed reality,” siger Kipman. “Du er nødt til at opbygge et Fundament, der skifter fra silicium til cloud-baseret arkitektur til at indse sin egen overgang fra personlige computere til fælles. Det vil tage tid,” han smiler.
Det er en blandet virkelighed — fremtidig computing?
Ilya Hel