211service.com
Duomenų gavyba atskleidžia istorinius įvykius vyriausybės archyvų įrašuose
Politinės istorijos studijos išgyvena revoliuciją. Šio pakeitimo varomoji jėga yra elektroninių vyriausybės veiklos įrašų prieinamumas ir galimybė suskaidyti šiuos duomenis taip, kaip niekada anksčiau nebuvo įmanoma.
Istorikai turi tiesioginę prieigą prie šiuolaikinių naujienų pranešimų apie svarbius pasaulio įvykius. Tačiau šias ataskaitas reikia sukalibruoti lyginant jas su to meto vyriausybės įrašais, kurie gali skirtis svarbiais ir nežinomais būdais. Tačiau šie įrašai paprastai paviešinami tik po kelerių metų. Daugybė vyriausybės dokumentų apsunkina šį procesą, nes tyrėjams pernelyg lengva nepastebėti kažko reikšmingo.
Taigi automatizuotas būdas šiuose vyriausybės įrašuose ieškoti svarbių įvykių būtų labai naudingas.

Duomenų gavyba atskleidžia vyriausybinių ryšių šuolį per Saigono griūtį (viršuje), bet mažai reikšminga, susijusi su Suomija (apačioje).
Šiandien Yuanjun Gao iš Kolumbijos universiteto Niujorke ir keli draugai teigia sukūrę statistinių priemonių rinkinį, galintį atlikti šį darbą. Jie išbandė šią techniką su JAV vyriausybės elektroniniais įrašais, išleistais Nacionalinio archyvo, ir palygino rezultatus su šiuolaikinių naujienų įrašais.
Darbas tapo įmanomas dėl to, kad JAV valstybės departamentas įslaptintus pranešimus saugo elektroniniu būdu nuo 1973 m. Daugelis 1973–1977 m. įrašų dabar yra viešai prieinami ir susideda iš 1,4 mln. išslaptintų kabelių ir su 0,4 mln. dokumentų susijusių metaduomenų. pristatytas diplomatiniu maišeliu.
Šie elektroniniai įrašai yra priskirti žymoms, susijusioms su jų tema. Taigi su Pietų Vietnamu susiję pranešimai pažymėti VS, su Jungtinių Tautų Generaline Asamblėja – UNGA, su Suomija – FI ir pan.
Tai leidžia tyrėjams sekti ryšius, susijusius su konkrečiomis temomis, nežinant pačių pranešimų detalių.
Planuojant pranešimų skaičių laikui bėgant, atsiskleidžia keletas įdomių modelių. Pavyzdžiui, jis atskleidžia, kad 1975 m. balandžio mėn., kai žlugo Saigonas, padaugėjo ryšių, susijusių su Pietų Vietnamu.
Pranešimai, susiję su JT Generaline Asamblėja, didėja reguliariais intervalais, atitinkančiais kasmet vykstančių asamblėjų datas. Šis modelis apima papildomą šuolį 1974 m. balandžio–gegužės mėn., kuris atitinka specialią JT sesiją, kurią sušaukė Alžyras, kad būtų aptarti jo reikalavimai remti naują tarptautinę ekonominę tvarką.
Priešingai, žymos, susijusios su Suomija 1973–1977 m., nerodo jokių spyglių ar ypatingo modelio, atspindinčio to meto tautos stabilumą.
Didelius šuolius gana lengva pamatyti vizualiai, tačiau Gao ir bendradarbiai sukūrė įrankius, leidžiančius juos automatiškai pastebėti ir įvertinti jų svarbą, lygindami juos su tuo metu foniniu veiklos lygiu.
Tai leidžia komandai sudaryti 30 svarbiausių įvykių per šį laikotarpį reitingą.
Ne visi šie smaigaliai atitinka svarbius pasaulio įvykius. Pavyzdžiui, du didžiausi svyravimai yra susiję su administraciniais klausimais, tokiais kaip transportas ir vizų įrašų sistemos pakeitimai.
Tačiau reitinge aptinkama daugybė kitų svarbių įvykių, tokių kaip Carterio administracijos prioritetas žmogaus teisėms, Egipto prezidentas, netikėtas Anwaro Sadato vizitas į Izraelį 1977 m., Pietryčių Azijos laivų žmonių krizė 1975–1976 m., 1973 m. Jomas. Kipuro karas ir Portugalijos pasitraukimas iš Angolos 1975–1976 m. ir pan.
Tai įdomus darbas, kuris turėtų pakeisti istorikų ir socialinių mokslininkų darbą. Ir tai tik pradžia. Tokie automatizuoti metodai taip pat gali parodyti, kaip žmonės tuo metu naudojo žymėjimo procesą, kaip dažnai buvo daromos klaidos ir ar galėjo dingti tam tikrų tipų pranešimai.
Ir kai bus išleisti išsamesni elektroniniai įrašai, mokslininkai galės sukurti pažangesnius jų gavybos būdus. Politinė istorija niekada nebus tokia pati.
Nuoroda: arxiv.org/abs/1712.07319 : Kasybos įvykiai su išslaptintais diplomatiniais dokumentais