„Microsoft Demos“ išplėstinė vizija

Šiandien „Microsoft“ tyrėjai demonstruos programinę įrangą, kuri realiu laiku gali uždėti kompiuterio sugeneruotą informaciją ant skaitmeninio realaus pasaulio vaizdo.





Pakeistas regėjimas : Šiame nešiojamajame kompiuteryje veikia papildytos realybės programinė įranga, kurią sukūrė „Microsoft“ inžinieriai. Jis gali atpažinti asmens vietą naudodamas integruotą kamerą. Šioje demonstracijoje virtualūs burbulai veda į virtualų aukso puodą.

Papildomų vaizdinių duomenų įtraukimas į vaizdo ekraną yra metodas, žinomas kaip papildyta realybė. Michaelas Cohenas , vyriausiasis „Microsoft Research“ tyrėjas Redmonde, Vašingtone, teigia, kad šis metodas gali suteikti dar vieną aspektą būsimiems išmaniesiems telefonams. Galite būti gatvėje, pakelti įrenginį ir jis galėtų atpažinti restoraną ir pateikti įvertinimus bei meniu, sako jis. Išmanusis telefonas su papildytosios realybės ekranu taip pat gali uždengti autobuso maršrutą ir apskaičiuoti, kada kitas autobusas važiuos tam tikros gatvės viršuje. Tai iš esmės tampa jūsų informacijos portalu, sako Cohenas.

Cohenas ir jo kolegos demonstruos papildytos realybės technologiją adresu TechFest , kasmetinė „Microsoft“ tyrimų projektų demonstracija Redmonde. Jų programinė įranga, kuri veikia nedideliame nešiojamajame kompiuteryje, analizuoja fotoaparato scenas, atitinka duomenų bazėje saugomas nuotraukas ir ekrane pateikia papildomą informaciją. Tyrėjai pažymi, kad išmanusis telefonas su papildyta realybe gali padėti inžinieriams pamatyti vamzdžius ar elektros laidus po gatve. „TechFest“ demonstracijoje programinė įranga bus naudojama žmonėms, kurie ieško lobių, link paslėpto prizo – (virtualaus) aukso puodo.



Papildyta realybė buvo aktyvi tyrimų sritis daugiau nei dešimtmetį, nors dažnai prireikė ant galvos tvirtinamo ekrano ir kuprinės vertės skaičiavimo įrangos. Pastaraisiais metais mobilieji telefonai ir nešiojamieji kompiuteriai su kameromis ir kitais jutikliais tapo pakankamai galingi, kad galėtų atlikti skaičiavimo darbo krūvį, reikalingą išplėstinės realybės sistemai paleisti. Pavyzdžiui, Nokia ir Kolumbijos universiteto mokslininkai taip pat kuria papildytos realybės sistemas, o Japonijos startuolis vadinamas Tonchidot tikisi idėją paversti produktu.

Dauguma papildytosios realybės sistemų turi sugebėti tiksliai orientuotis, kad veiktų patikimai. Kai kurie nustato savo padėtį naudodami GPS arba trianguliuodami kelis „Wi-Fi“ signalus ir, naudodami akselerometrą bei skaitmeninį kompasą, nustato, į kurią pusę jie nukreipia. „Microsoft“ papildytos realybės įrenginyje pagrindinis dėmesys skiriamas tam, kad būtų galima atpažinti objektus scenoje, naudojant sudėtingus kompiuterinio matymo algoritmus. Kadangi demonstracija vykdoma kontroliuojamoje konferencijų salės aplinkoje, tyrėjai nenaudoja vietą aptinkančių jutiklių; vietoj to jie pasikliauja tik kompiuterine vizija.

Scenos elementų atpažinimas, nepaisant kampo ar apšvietimo, yra didelis iššūkis. Cohenas ir jo kolega Simonas Winderis, vyresnysis „Microsoft“ tyrimų inžinierius, sukūrė algoritmus, kurie atlieka šią užduotį kadras po kadro, vaizdo įrašų tiekimui realiuoju laiku. Algoritmas akimirksniu suderina kadrus su anksčiau analizuotais vaizdais, saugomais duomenų bazėje. Kurdami algoritmą, mokslininkai nustatė geriausius parametrus ar charakteristikas, kad padėtų sistemai suderinti kiekvieną sceną. Cohenas paaiškina, kad jie naudojo mašininį mokymąsi, kad greitai išbandytų skirtingus parametrus ir nustatytų geriausius atitikmenis.



Šiandienos demonstracinei versijai Coheno komanda nufotografavo konferencijų salę, kurioje vyksta „TechFest“. Nuotraukos buvo analizuojamos naudojant kompiuterinio matymo programinę įrangą, o pagrindinės funkcijos buvo saugomos nešiojamojo kompiuterio duomenų bazėje, kuriame yra įmontuota vaizdo kamera, kad būtų galima užfiksuoti sceną.

Maždaug per dešimtąją ar penkioliktąją sekundės dalį programinė įranga gali atpažinti sceną ir surasti ją duomenų bazėje, sako Cohenas. „TechFest“ metu demonstruojamame lobių paieškos žaidime programinė įranga rodo burbulų seką, nurodantį kryptį, kuria vartotojas turėtų eiti, kad surastų prizą.

Kadangi tai tik tyrimų projektas, Cohenas pabrėžia, kad dar yra daug kur tobulėti. Viena vertus, parametrai, naudojami fizinėms objektų savybėms nustatyti, gali būti patobulinti, kad atitikimas būtų dar tikslesnis, sako jis.



Kitas iššūkis, kurį reikia apsvarstyti, yra tai, kaip tokia sistema veiktų mažiau kontroliuojamoje aplinkoje, sako Kari Pulli , „Nokia“ mokslinis bendradarbis. Labiausiai paplitusi papildytos realybės programa yra naudoti ją kaip muziejaus vadovą, sako jis. Tai lengva padaryti, nes aplinka yra fiksuota. Iššūkis yra užtikrinti, kad tokios sistemos galėtų veikti nepažįstamame kontekste, pavyzdžiui, miesto gatvėje. Tačiau Pulli mano, kad tai gali tapti įmanoma dėl „Microsoft“, „Google“ ir „Navteq“ priklausančių duomenų bazių, kuriose yra gatvių vaizdų.

Cohenas teigia, kad yra optimistiškai nusiteikęs, kad jo komandos sukurti kompiuterinio matymo algoritmai galėtų būti naudojami be galo daug – nuo ​​papildytosios realybės sistemų iki žaidimų ir robotikos, tačiau jis nenumato, kad jie artimiausiu metu bus naudojami konkrečiame „Microsoft“ produkte.

paslėpti