211service.com
AI nugali Hivemind
„Amazon's Mechancial Turk“ yra didžiausias beveik anoniminis užsakomųjų paslaugų teikimas: bet kokia užduotis, kurią galima atlikti internetu, gali būti atlikta derinant automatizuotą rinką ir žmogaus darbą. Tie, kurie užsiregistruoja atlikti užduotis - Turkai - mokamas tik centas už darbą, kad būtų galima atlikti viską nuo duomenų įvedimo iki liaudies menas .
(DC) Jimas Linwoodas
„Mechanical Turk“ skirta atlikti užduotis, kurios yra lengvos žmonėms ir sunkios mašinoms, pvz., suskirstyti į kategorijas arba identifikuoti vaizdų turinį. Tačiau „Amazon“ ir visų jos imitatorių problema yra ta, kad mašinos vis geriau atlieka daugelį užduočių, o „Mechanical Turk“ žmonės dėl priežasčių, kurias išnagrinėsiu rytojaus įraše, blogėja.
Pavyzdžiui, neseniai internetinėje apžvalgų svetainėje „Yelp“ dirbantys mokslininkai išleido a popierius (pdf) apie savo patirtį, sulyginant tūkstančius mechaninių turkų su a prižiūrimas mokymosi algoritmas .
Rezultatai nebuvo gražūs: norėdami rasti tiurkų populiaciją, kurios darbas buvo priimtinas, tyrėjai pirmiausia naudojo „Mechanical Turk“ testą 4660 pareiškėjų. Tai buvo daugelio pasirinkimų testas, skirtas nustatyti, ar turkeris gali nustatyti tinkamą verslo kategoriją (restoranas, apsipirkimas ir kt.) ir oficialioje svetainėje arba telefonu patikrinti teisingą telefono numerį ir adresą.
79 praėjo. Tai buvo an itin elementarus kelių pasirinkimų testas. Tai verčia stebėtis, kaip kiti 4581 buvo pakankamai protingi, kad galėtų valdyti interneto naršyklę.
Šie 79 aukštos kokybės darbuotojai tada susidūrė su verslo informacijos tikrinimo problema po tris. Tai leido tyrėjams paimti tik tuos rezultatus, dėl kurių paprasta dauguma turkerių sutiko, kad jie buvo teisingi, arba kai kuriais atvejais paimti rezultatą, kurį pasirinko turkeris, kuris istoriškai buvo tiksliausias.
Tyrėjai metė Naive Bayes klasifikatorių į tą patį problemų rinkinį. Tai savotiškas prižiūrimo mokymosi algoritmas; vienas tas, pagal 2006 m. šių sistemų palyginimą , net nėra pati geriausia rūšis.
Bayes klasifikatorius laimėjo patogiai.
Beveik kiekvienu atveju algoritmas, parengtas remiantis 12 milijonų vartotojų pateiktų „Yelp“ atsiliepimų, teisingai nustatė verslo kategoriją trečdaliu dažniau nei žmonės. Automobilių kategorijoje kompiuteris du kartus dažniau nei surinktos masės teisingai identifikavo verslą.
Šie rezultatai nebūtinai rodo, kad verslo skirstymas į kategorijas yra tokia problema kaip šachmatai, kai žmogaus kompiuterį pagaliau pranoko mechaninis atitikmuo. Atvirkščiai, jie rodo, kad kažkas sugedo pačiame „Mechanical Turk“ – arba skatinimo sistema, arba jos kokybės kontrolės mechanizmai. Jau seniai žinoma, kad „Mechanical Turk“ atlyginimai yra gana maži – darbuotojai už savo darbą vidutiniškai uždirba nuo dviejų iki trijų dolerių per valandą, ir tikėtina, kad tai yra dalis problemos. Ekonomistai tik dabar pradėjo spręsti šį klausimą; daugiau apie tai rytoj.
