Tinkamo dangaus gabalo radimas

Praėjusią savaitę val SIGRAFAS , tarptautinė kompiuterinės grafikos konferencija, grupė pristatė naujovišką sistemą, skirtą dangaus vaizdams analizuoti. Dauguma komercinių vaizdų paieškos sistemų išsiaiškina, kas yra vaizde, analizuodamos susijusį tekstą, pvz., žodžius, supančius paveikslėlį tinklalapyje, arba žmonių pateiktas žymas. Tačiau idealiu atveju programinė įranga analizuotų paties vaizdo turinį. Šioje srityje atlikta daug tyrimų, tačiau kol kas nė viena sistema problemos neišsprendė. Naujoji sistema, pavadinta „SkyFinder“, gali suteikti svarbios informacijos apie tai, kaip sukurti intuityvią, automatinę, keičiamo dydžio visų vaizdų paieškos įrankį.





Ieškote danguje: SkyFinder automatiškai padalija vaizdą į dalis ir kiekvienam priskiria žymas, kad vartotojai galėtų rasti tokius vaizdus kaip aukščiau.

Jian Sun , kuris dirbo SkyFinder ir yra pagrindinis tyrėjas Visual Computing Group adresu „Microsoft“ tyrimai , sako, kad tradicinis požiūris į vaizdų paiešką kartais sukelia nesąmoningus rezultatus, kai kompiuteris neteisingai interpretuoja aplinkinį tekstą. Paprastai varikliams, kurie analizuoja vaizdų turinį, o ne tekstą, paieškai reikia paveikslėlio – vartotojo pateikto dalyko, kuris labai panašus į numatytą rezultatą. Deja, tokį vaizdą vartotojui gali būti nelengva rasti. „Sun“ teigia, kad „SkyFinder“, priešingai, suteikia gerų rezultatų ir leidžia vartotojui intuityviai sąveikauti su paieškos varikliu.

Norėdamas ieškoti konkretaus dangaus vaizdo, vartotojas tiesiog įveda užklausą gana natūralia kalba, pvz., dangų, padengtą juodais debesimis, su horizontu pačiame apačioje. SkyFinder pasiūlys siūlomus vaizdus, ​​​​atitinkančius šį aprašymą.



Kiekvienas vaizdas yra apdorojamas jį įtraukus į duomenų bazę. Sun aiškina, kad naudojant populiarų metodą, vadinamą žodžių maišu, vaizdas suskaidomas į mažas lopinėles, kurių kiekviena analizuojama ir priskiriamas kodinis žodis, apibūdinantis jį vizualiai. Analizuodama kodinių žodžių šablonus, sistema suskirsto vaizdą į kategorijas, pvz., mėlynas dangus arba saulėlydis, ir nustato saulės bei horizonto padėtį. „Sun“ teigia, kad atliekant šį darbą neprisijungus, sistemos mastelį galima lengvai pritaikyti paieškai labai didelėse vaizdų duomenų bazėse. („SkyFinder“ duomenų bazėje šiuo metu yra pusė milijono vaizdų.)

Taip pat galima patikslinti paieškos terminus naudojant vaizdinę sąsają. Pavyzdžiui, sistema siūlo ekraną, kuriame vartotojas gali reguliuoti piktogramas, kad būtų rodoma norima saulės ir horizonto padėtis. Tos koordinatės pridedamos prie paieškos.

SkyFinder logiškai išdėsto vaizdus ekrane, pavyzdžiui, nuo mėlyno dangaus iki debesuoto dangaus arba nuo dienos iki saulėlydžio. Kai vartotojas suranda jai patinkantį vaizdą, jis gali jį naudoti, kad galėtų atlikti tikslesnę panašių vaizdų paiešką.



Sistemoje taip pat yra įrankių, padedančių vartotojui pakeisti dangų viename paveikslėlyje dangumi iš kitos nuotraukos.

Kompiuterinė grafika per pastaruosius dešimtmečius sulaukė didžiulės sėkmės, tačiau paprastam kompiuterio vartotojui vis dar neįmanoma susintetinti savavališko vaizdo ar vaizdo įrašo pagal savo skonį, sako Jamesas Haysas, kuris nedalyvavo tyrime ir turi kompiuterių mokslų daktaro laipsnį. iš Carnegie Mellon universiteto. Jis mano, kad svarbu sukurti sudėtingesnius įrankius nepatyrusiems vartotojams. Tokie žmonės gali naudoti tokį įrankį kaip „SkyFinder“, kad surastų norimą vaizdą arba pakoreguotų esamą vaizdą. Haysas mano, kad pagrindinis SkyFinder indėlis yra vartotojo sąsaja.

Ritendra Datta, Google inžinierė, studijavusi mašininį mokymąsi ir vaizdų paiešką, teigia, kad leidimas kompiuteriams automatiškai suprasti, kas rodoma vaizde, išlieka viena iš pagrindinių vaizdų paieškos problemų. Panašu, kad „SkyFinder“ yra įdomus naujas požiūris, tinkantis vieno tipo vaizdams. Datta mano, kad specializuotų programų pažanga ilgainiui galėtų būti pritaikyta platesniu mastu.



Tačiau jis mano, kad paieškos sistemoms, kurios remiasi automatine vaizdų analize, labai reikalingi išsamūs tinkamumo naudoti tyrimai.

„Sun“ planuoja patobulinti „SkyFinder“ pritaikydama jį analizuoti daugiau dangaus atributų ir išplėsdama duomenų bazę. Kol kas, anot jo, sistemos, kurios automatiškai analizuoja vaizdus, ​​turi būti treniruojamos visiškai skirtingai, atsižvelgiant į tai, su kokio tipo vaizdu jos dirba. Tačiau jis sako, kad jo darbas su „SkyFinder“ gali būti naudojamas dangaus nuotraukoms identifikuoti iš bendro vaizdų banko.

paslėpti