211service.com
„Web Spider“ kiekvienam
Vis didėjant informacijos kiekiui internete, kyla klausimas, kaip visa tai apdoroti ir padaryti naudingą. Paskambino startuolis 80 kojų , įsikūrusi Hiustone, Teksaso valstijoje, tikisi, kad nebrangi, paskirstyta žiniatinklio tikrinimo paslauga galėtų padėti naujokams išgauti žiniatinklį informacijos, nekuriant milžiniškų serverių fermų, kurias naudoja pagrindinės paieškos sistemos. Šią savaitę bendrovė pradėjo veiklą DEMO – konferencijoje San Diege, kurioje pristatomos naujos įmonės.
Žiniatinklio tikrinimo programos arba vorai yra programinė įranga, kuri automatiškai lankosi interneto puslapiuose ir gali būti naudojama jiems indeksuoti bei informacijos iš skirtingų puslapių rinkti. Tikrinimo programas naudoja paieškos sistemos, pavyzdžiui, norėdami stebėti informacijos vietą internete. Tačiau žiniatinklio mastas reiškia, kad visapusiškas tikrinimas sunaudoja daug apdorojimo galios, o tai paprastai reiškia didžiulių duomenų centrų kūrimą programinei įrangai maitinti.
„80legs“ tikisi padaryti šią technologiją labiau prieinamą mažoms įmonėms ir asmenims, leisdama naudotis išperkamosios nuomos būdu ir leisdama klientams mokėti tik už tai, ką jie nuskaito.
Žiniatinklio tikrinimo technologija taip pat labai svarbi semantinėms svetainėms ir paslaugoms, skirtoms natūralios kalbos užklausoms apdoroti. Nors „80legs“ tikisi, kad naudotojai domėsis paieška ir semantinėmis programomis, generalinis direktorius Shionas Deysarkaras teigia, kad tarp bandančių paslaugą buvo ir mažiau techninių interesų turinčių klientų. Pavyzdžiui, kai kurie rinkos tyrinėtojai naudoja 80 kojų, kad atskleistų konkrečių įmonių ar temų paminėjimus visame internete.
Vartotojas gali pradėti naršyti internete per 80legs žiniatinklio sąsają. Įmonės svetainėje esanti forma leidžia jiems nustatyti projekto parametrus ir įkelti pasirinktinį kodą, reikalingą kontroliuoti, kaip tikrinimo programa atlieka savo darbą. Pavyzdžiui, vartotojas gali norėti, kad tikrinimo programa surastų vaizdus ir patikrintų juos pagal autorių teisių saugomų vaizdų duomenų bazę. Deysarkaras sako, kad jo įmonės tikrinimo programos gali apdoroti iki dviejų milijardų puslapių per dieną. Bendrovė ima 2 USD už kiekvieną milijoną nuskaitytų puslapių, taip pat trijų centų mokestį už apdorojimo valandą.
Daugeliui pradedančiųjų įmonių sunku rasti lėšų, reikalingų dideliems duomenų centrams sukurti, tačiau 80legs tai nėra toks požiūris, kuriuo kūrė savo žiniatinklio tikrinimo infrastruktūrą. Vietoj to įmonė savo programinę įrangą naudoja paskirstytame asmeninių kompiuterių tinkle, panašiai kaip tie, kurie naudojami tokiems projektams kaipSETI @ home. Paskirstytą skaičiavimo tinklą sudaro „Plura Processing“, kuri jį nuomoja 80 kojų. „Plura“ verčia kompiuterių vartotojus tiekti nepanaudotą apdorojimo galią mainais į prieigą prie žaidimų, aukas labdaros organizacijoms ir kitus apdovanojimus.
Deysarkaras teigia, kad šis metodas žymiai sumažina 80 kojų išlaidas, todėl bendrovė gali pasiūlyti savo paslaugas daug pigiau, nei būtų įmanoma, jei ji naudotųsi duomenų centru ar net debesų kompiuterijos paslauga, tokia kaip „Amazon Web Services“.
Danielis Tunkelangas, paieškos įmonės įkūrėjas Endeca , įsikūrusi Kembridže, MA, teigia, kad gera žiniatinklio tikrinimo paslauga gali būti naudinga pradedantiesiems, norintiems sutelkti dėmesį į paieškos patirties kūrimą, o ne į duomenų rinkimą. Tačiau Tunkelangas sako, kad 80 kojų sėkmė gali priklausyti nuo to, kaip lengva vartotojams pritaikyti nuskaitymą. Didelis klausimas yra, kiek pritaikomas ir programuojamas yra nuskaitymas? jis sako.
Tunkelangas taip pat pažymi, kad žiniatinklio tikrintuvui svarbu užfiksuoti kuo daugiau informacijos. Pavyzdžiui, kelias, kuriuo tikrinimo programa pasiekė tam tikrą puslapį, gali suteikti paieškos įmonei naudingos informacijos apie to puslapio turinį.
Tokia paslauga kaip 80 legs taip pat galėtų būti naudinga universiteto mokslininkams. Nuskaitymas dideliu mastu iš tiesų yra brangi kliūtis, per kurią reikia įveikti eksperimentinius paieškos projektus akademinėje bendruomenėje, kuriai dažnai trūksta didelio masto infrastruktūros. Kevinas Changas , Ilinojaus universiteto Urbana-Champaign kompiuterių mokslo docentas.
Changas mano, kad paskirstytas 80 kojų pobūdis yra įdomi kryptis ir skamba daug žadanti [sumažinti] šliaužiojimo išlaidas. Kartu jis sutinka, kad daug kas priklauso nuo to, kaip efektyviai veikia sistema ir kaip efektyviai vartotojai gali pritaikyti, kokius duomenis nori apdoroti.
„80legs“ planuoja pradėti rinką, kurioje netechniniai vartotojai galės įsigyti programų, galinčių valdyti, kaip robotas veikia. Įmonės partnerės taip pat galės parduoti prieigą prie programų, kurios valdo 80 legs robotus.