211service.com
Ištyrėme, ar skaitmeninis kontaktų sekimas iš tikrųjų veikė JAV

Ponia Tech | Pexelis
2020 metų pavasarį visuomenei buvo išleistos pirmosios pranešimų apie COVID-19 poveikį sistemų versijos. Šios sistemos pažadėjo sulėtinti ligos plitimą, teikdamos automatinius įspėjimus žmonėms, kurie kontaktavo su virusu. Dabar, praėjus daugiau nei metams, gyventojai daugiau nei 50 šalių, įskaitant pusę JAV valstijų, gali pasirinkti šias sistemas.
Tačiau išlieka didelis klausimas: kaip ši technologija veikė? Kai kurie tyrimai siūlo atsakymus, tačiau, nepaisant tokio plataus platinimo, sunku įvertinti, ar pranešimai apie kontaktą iš tikrųjų galėjo sustabdyti COVID-19 plitimą. Tai ypač pasakytina apie JAV, kur daugelis valstybių paleido savo programas – tai decentralizuotas požiūris, atspindintis suskaidytą Amerikos atsaką į pandemiją.
Siekdama sužinoti daugiau apie tai, kaip ši technologija sekėsi JAV, MIT Technology Review susisiekė su kiekvienu valstijos visuomenės sveikatos departamentu, kuris pradėjo skaitmeninę kontaktų sekimo sistemą ir išnagrinėjo anoniminių amerikiečių paliktas programų apžvalgas. Uždavėme du klausimus: kas iš tikrųjų naudoja šią technologiją ir kaip žmonės tai jaučia?
Galutinis šios analizės rezultatas parodo neištirto potencialo vaizdą. Daugelis šalies pranešimų apie poveikį programoms yra nepakankamai išnaudojamos, nesuprantamos ir nepakankamai patikimos, tačiau ši technologija vis tiek gali tapti visuomenės sveikatos priemone būsimiems ligų protrūkiams.
Kaip veikia technologija
Pranešimai apie galimą kontaktą pirmiausia buvo pateikti kaip papildymas tradiciniam kontaktų atsekimui. Taikydami tradicinį rankinį metodą, tyrėjai, ieškantys žmonių, kurie galėjo būti užsikrėtę, prašo pacientų telefono skambučiais ir interviu atsekti jų buvimo vietą ir veiklą. Naujoji technologija pažadėjo automatiškai aprėpti visas populiacijas, o ne tik mažas ligų grupes – tai aiškus privalumas stebint greitai plintančią ligą.
Galite prisiminti, pavyzdžiui, draugą, kurį sutikote pietų metu, bet ne nepažįstamąjį, šalia kurio stovėjote 15 minučių eilėje maisto prekių parduotuvėje. Pranešimų apie galimą kontaktą sistema įsimena už jus, anonimiškai naudodama „Bluetooth“, kad saugotų netoliese esančių telefonų žurnalą ir įspės jus, jei vienas iš šių telefonų susietas su teigiamu testo rezultatu.
Pirmąją šios sistemos bangą sukūrė kūrėjų kooperatyvai, kurių dauguma bendradarbiavo su Apple ir Google, kad sukurtų vienodą standartą. „Apple-Google“ sistema pirmenybę teikė vartotojų privatumui, anonimizavo jų duomenis ir nesekė vartotojų buvimo vietos. Šią sistemą palaiko dvi dominuojančios telefonų platformos, todėl ši sistema buvo plačiausiai pritaikyta ir naudojama daugumoje JAV valstijų.
Šių sistemų efektyvumą buvo žinoma sunkiai įvertinti. Tyrimai tik dabar pradeda pasirodyti programėlės JK ir Šveicarija , pavyzdžiui. JAV vertinimą dar labiau apsunkina tai, kad kiekviena valstybė iš esmės daro savo. Tačiau mūsų analizė turi keletą dalykų:
- JAV sistemos buvo paleistos palyginti vėlai pandemijos metu – kai šalies rudens/žiemos antplūdis dažniausiai jau vyko
- Ši technologija nebuvo plačiai pritaikyta, nors kai kuriose valstybėse sekasi geriau nei kitoms
- Visuomenės nepasitikėjimas naujomis technologijomis ir išteklių trūkumas visuomenės sveikatos agentūrose, prekiaujančiose ta technologija, stabdė tiek priėmimo rodiklius, tiek tai, kaip žmonės naudojosi sistemomis.
Kas naudojasi šia technika
Stebėjome pranešimų apie galimą kontaktą programas, kurios buvo išleistos 25 valstijose ir Kolumbijos apygardoje. Virdžinija buvo pirmoji valstija, kuri 2020 m. rugpjūčio mėn. viešai paskelbė šią technologiją savo gyventojams, o kitos valstijos dar tik pradeda veikti. Masačusetsas pradėjo bandyti savo programėlę su pilotu dviejuose miestuose 2021 m. balandžio mėn., o Pietų Karolina šiuo metu vykdo bandomąją programą Klemsono universitete. Valstybė iš tikrųjų pradėjo dirbti su savo sistema dar 2020 m. gegužės mėn., tačiau įstatymų leidėjai uždraudė visuomenės sveikatos departamentą iš bet kokių skaitmeninių kontaktų paieškos darbų praėjusią vasarą dėl privatumo problemų, stabdančių plėtrą.
Net tose valstijose, kuriose yra tokių programų, ne visi gali jomis naudotis. Pranešimai apie užsikrėtimą galimi tik išmaniųjų telefonų naudotojams; ir apie 15% amerikiečių neturi išmaniojo telefono Pasak Pew tyrimų centro. Vis dėlto daugiau nei pusė JAV gyventojų dabar gali prisijungti. Ar jie nuspręs prisijungti prie tų sistemų, yra kitas dalykas.
Kadangi didžioji dauguma valstybių viešai nepraneša apie naudotojų duomenis, susisiekėme tiesiogiai su valstijų visuomenės sveikatos departamentais ir paklausėme, kiek žmonių pasirinko šią technologiją.
Dvidešimt keturios valstijos ir DC pasidalino naudotojų skaičiavimais, rodančiais, kad iki gegužės pradžios iš viso 36,7 mln. amerikiečių pasirinko gauti pranešimus. Havajuose yra didžiausia gyventojų dalis – apie 46%. Dar keturiose valstijose daugiau nei 30% gyventojų pasirinko: Konektikuto, Merilando, Kolorado ir Nevados valstijose. Dar septyniose valstijose yra daugiau nei 15% gyventojų.
Ši proporcija yra svarbi: modeliavimo studijos nustatė, kad jei maždaug 15% gyventojų prisijungs prie sistemos, tai gali žymiai sumažinti bendruomenės koronaviruso atvejų skaičių, hospitalizavimą ir mirčių skaičių. Pagal šią metriką 13 valstijų, kurios kartu sudaro maždaug trečdalį JAV gyventojų, gavo tam tikrą apsaugos laipsnį dėl pranešimų apie poveikį.
Likusios 11 valstybių, kuriose yra pranešimų apie galimą kontaktą su užsikrėtusiu asmeniu programomis, neatitinka šio sėkmės kriterijaus. Iš tų 11 trijų valstijų yra mažiau nei 5% gyventojų: Arizonoje, Šiaurės Dakotoje ir Vajominge. Pietų Dakota, vienintelė valstija, kuri neatsakė į spaudos prašymą, dalijasi „Care19 Diary“ programėle su mažai aktyvinamomis Šiaurės Dakotos ir Vajomingo valstijomis.
Vis dėlto valstijų palyginimas nėra tobulas, nes nėra federalinių standartų, kuriais būtų vadovaujamasi, kaip valstijos renka arba pateikia duomenis, o kai kurios gali pasirinkti labai skirtingai nei kitos. Pavyzdžiui, DC praneša apie pranešimo apie poveikį pasirinkimo numerį Iš naujo atidaromas metrikos puslapis , šis skaičius iš tikrųjų yra didesnis nei jo gyventojų. „DC Health“ atstovas paaiškino, kad į pasirinkimo numerį įtraukiami turistai ir žmonės, dirbantys DC, net jei jie gyvena kitur. Savo tikslams apžvelgėme DC aktyvinimo rodiklį kaip aplinkinės metropolinės zonos gyventojų dalį (įskaitant netoliese esančias Merilando, Virdžinijos ir Vakarų Virdžinijos dalis).
Kita priežastis, dėl kurios šiuos rodiklius sunku išmatuoti: kai kurios valstijos, kuriose naudojimo rodikliai yra didesni, gauna naudos iš didelio atnaujinimo. „Apple“ ir „Google“ išleido rugsėjį : Exposure Notification Express arba ENX. Ši sistema leido valstybėms daug greičiau kurti programas, be to, milijonai „iPhone“ naudotojų buvo pakviesti nieko neatsisiųsti. Jie gali suaktyvinti pranešimus tiesiog perjungdami jungiklį savo telefono nustatymuose.
ENX aktyvinimas yra daug patogesnis, o ekspertų teigimu, tai gali atrodyti saugiau nei atsisiųsti naują programėlę. Tai labai padidino aktyvinimo rodiklius valstybėse, kurios jį naudoja. Pavyzdžiui, Havajai pamatė savo vartotojus daugiau nei dvigubai vasario–gegužės mėn., kol bus išleistas ENX.
Tačiau greitoji sistema reiškia, kad turime ne tokius tikslius vartotojo duomenis. Valstybės negali tiesiogiai stebėti ENX aktyvinimo, o vietoj to turi pasikliauti „Apple“ savo numeriais.
Už skaičių
Net kai daug gyventojų atsisiuntė programėlę ar pasuko tą jungiklį savo „iPhone“ nustatymuose, sistema vis tiek turi būti tinkamai naudojama, kad COVID atvejai pasikeistų. Taigi bandėme suprasti, kaip žmonės naudojasi sistemomis.
KAM neseniai atliktas tyrimas nustatė, kad amerikiečiai nesiryžo pasitikėti skaitmenine kontaktų sekimo technologija. Tačiau ši išvada buvo pagrįsta apklausomis, atliktomis daugeliui valstybių net nepaleidžiant savo programėlių. Siekdama nustatyti visuomenės požiūrį į JAV valstijos programas, „MIT Technology Review“ surinko ir išanalizavo programų apžvalgas iš „Google Play“ parduotuvės. Peržiūrėjome tik „Google Play“ apžvalgas (iš „Android“ naudotojų), kad gautume naujausius ir nuosekliausius duomenis. (Dauguma „iPhone“ naudotojų dabar gali įjungti pranešimus neatsisiųsdami programos.)
Programų apžvalgų peržiūra nėra tobula sistema. Naudotojai, kurie nusprendė peržiūrėti savo valstijos programą, nėra reprezentatyvus EN aktyvinančių gyventojų pavyzdys – jie yra tie vartotojai, kurie nori pasidalinti tvirta nuomone apie technologiją.
Vis dėlto štai ką radome:
- Daugumos valstijų programų vidutiniai įvertinimai yra nuo 3 iki 4.
- Mičiganas turi mažiausiai balų – 2,6.
- DC, Kalifornija, Niujorkas, Delaveras ir Masačusetsas turi aukščiausius balus – daugiau nei 4.
Daugelis 1 žvaigždutės apžvalgininkų neteisingai suprato, kaip veikia jų valstijos programa, nepasitikėjo technologija arba nesugebėjo suprasti, kaip programa tinka platesnei visuomenės sveikatos sistemai. Tai rodo, kad daugeliui amerikiečių programa neatliko savo darbo, nors ji buvo techniškai naudojama.
Pamokos iš neigiamų atsiliepimų
Prastos apžvalgos suteikia žvilgsnį į įprastas problemas ir klaidingas nuomones, su kuriomis susidūrė skaitmeninių kontaktų sekimo sistema.
Maži nesklandumai padarė didelį skirtumą .
Ne kartą apžvalgininkai teigė, kad jiems prireikė aktyvinimo kodo. Kad padėtumėte apsaugoti privatumą, kai užsikrėtėte koronavirusu, į programą neįvedate savo vardo ar kitos identifikacinės informacijos: vietoj to įvedate skaičių eilutę, kurią jums suteikia visuomenės sveikatos skyrius. Kai kurie apžvalgininkai teigia, kad jie nežino, kur gauti aktyvinimo kodą, kai testas buvo teigiamas, arba kad jiems pasirodė klaidų pranešimai. Apie šią problemą girdėjome iš kūrėjų kitose šalyse.
Kai kurios JAV valstijos ir kitos šalys supaprastino procesą automatizuodami kodo siuntimą, tačiau daugeliu atvejų vartotojai turi laukti, kol jiems paskambins kontaktų sekimo priemonė. Šis laukimo laikotarpis gali sumažinti pasitikėjimą technologija ir žymiai sulėtinti skaitmeninių kontaktų sekimą.
Pasitikėjimas susijęs ne tik su pačia programa. Tai platesnė.
Daugelis programų apžvalgininkų taip pat nepasitiki naujomis technologijomis, vyriausybe ar abiem. A Pew tyrimų centro apklausa 2020 m. liepos mėn. atliktas tyrimas parodė, kad 41 % amerikiečių greičiausiai nekalbėtų su visuomenės sveikatos pareigūnu telefonu ar trumpąja žinute, o 27 % teigė, kad jiems nepatiktų dalytis neseniai gyvenusių kontaktų vardais – abu pagrindiniai kontaktų atsekimo elementai. procesas.
Skaitmeninis kontaktų sekimas susiduria su panašiais iššūkiais. Kai kurie apžvalgininkai taip stipriai jautė savo privatumą, kad atėjo į savo valstybinės programos puslapius, norėdami pasigirti savo atsisakymu atsisiųsti šią technologiją. Daugelis pakartojo šio apžvalgininko iš Pensilvanijos nuotaikas: atidaryti prieigą prie mano „Wi-Fi“, GPS ir „Bluetooth“? Baisu. Ne, ačiū, Harisburgai.
Mažas naudojimas sukuria nepasitikėjimo spiralę žemyn.
Vienas iš esminių skaitmeninių kontaktų sekimo aspektų yra tai, kad norint, kad jis veiktų, reikia dalyvauti – bent 15 % bendruomenės, bet pageidautina daug daugiau. Kai žmonės nedalyvauja, tikimybė sutikti yra mažesnė (net jei koronaviruso lygis yra aukštas), todėl sistema greičiausiai nesiųs įspėjimų tiems mažam žmonių skaičiui, kurie daryti suaktyvinti pranešimai apie galimą kontaktą.
Keletas atsiliepimų nuėjo taip toli, kad kiti jų valstijos gyventojai paprašė pasirinkti pranešimus apie galimą kontaktą, primindami kolegoms apžvalgininkams, kad didesnis naudojimas lemia didesnį efektyvumą, o tai labiau primena Facebook argumentą nei programų parduotuvę.
Tai galėjo suklaidinti būtiniausius darbuotojus ar kitus priekinės linijos darbuotojus, kurie tikrai žinojo, kad yra pažeidžiami. Žmonės, kurie pasirinko sistemą tikėdamiesi apsaugos – tik norėdami tylėti – galėjo būti atgrasyti manydami, kad technologija paprasčiausiai neveikia.
Pavyzdžiui, vienas apžvalgininkas iš Naujojo Džersio, kuris teigė dirbantis greitosios pagalbos skyriuje, išreiškė nusivylimą dėl to, kad jie nebuvo įspėti nė karto net po tiesioginio kontakto su COVID-19 pacientais. Tie, kurie jautė, kad jų programa neveikia, galėjo atgrasyti kitus nuo jos atsisiuntimo, nors iš tikrųjų daugiau vartotojų buvo būtent tai, ko reikėjo, kad sistema veiktų sėkmingai.
Teigiamų apžvalgininkų pamokos
O kaip atsiliepimai, kuriuose programos buvo gerai įvertintos? Štai ką radome:
Pasitikėjimas ir toliau yra didelė problema .
Teigiami programų apžvalgininkai bandė kovoti su nepasitikėjimu paaiškinimais ir pritarimais. Tiesą sakant, dauguma valstybinių programų turi daugiau penkių žvaigždučių įvertinimų nei bet kuri kita kategorija – tai yra padrąsinantis signalas, kad tūkstančiai amerikiečių norėjo išbandyti šią technologiją.
Daugelis žmonių bando atlikti visuomenės sveikatos sistemos darbą .
Kai kurie iš šių teigiamų apžvalgininkų nurodė save kaip technologijų srities ekspertus, pavyzdžiui, programinės įrangos inžinierius ir saugumo analitikus. Jie paskelbė paaiškinimus apie tai, kaip veikia skaitmeninė kontaktų sekimo sistema, ir patikina, kad ne, ši programa nebendrins jūsų buvimo vietos su vyriausybe.
Vienas saugumo ekspertas iš Kolorado parašė: Prašau, prašau. Naudokite šią programą. Kontroliuokite plitimą.
Vienas saugumo ekspertas iš Kolorado parašė: Prašau, prašau. Naudokite šią programą. Kontroliuokite plitimą.
Nors šios pastangos gali atrodyti malonios, tokios apžvalgos slepia esminę problemą: pasitikėjimą turėtų kurti visuomenės sveikatos institucijos, o ne atsitiktiniai komentatoriai. Ir jie turėtų turėti išteklių tai padaryti veiksmingesniame forume nei „Google Play“ parduotuvė.
Visuomenės sveikatos agentūroms trūko išteklių .
Šios apžvalgos – ir teigiamos, ir neigiamos – rodo, kad visuomenės sveikatos sistemos susidūrė su dideliu spaudimu, kad tai padarytų teisingai. Tačiau iš tikrųjų valstybinės sveikatos agentūros galėjo nuveikti tik tiek, kiek turi biudžetų ir pajėgumų. Pavyzdžiui, Naujojo Džersio visuomenės sveikatos darbuotojai teigė, kad jie pasitikėjo nemokamu rinkodaros įrankių rinkiniu ir „Google“ teikiama skelbimų vieta. Nors agentūra dirbo su apskrities sveikatos departamentais ir socialine žiniasklaida, siekdama tikslesnės reklamos, jos pastangos buvo ribotos, nes daugumai darbuotojų tuo pačiu metu teko susidurti su kitais COVID atsako aspektais.
Manau, kad norint, kad bendruomenės įsigytų bet kokią naują technologiją, reikia didelių investicijų, sako Pardis Sabeti, Harvardo ir MIT skaičiavimo genetikas, sukūręs Covid-19 programas aukštojo mokslo institucijoms.
Viena šių sistemų kritika JAV yra ta, kad jos buvo kratinys be federalinės vadovybės. Tačiau tinkamai įgyvendinus pataisas gali būti sėkmingas. Kai kurie ekspertai pasiūlė susieti programas su patikimomis institucijomis, kad sukurtų tai, ką iškvietė ekspertai dalinis visuomenės pasitikėjimo kūrimas – vienu metu įgyti pasitikėjimą viena vietos bendruomene.
Sabeti darbas gali būti šios strategijos pavyzdys. Universitetuose jos komanda bendradarbiavo su studentais ir kitais bendruomenės nariais, kad išbandytų su COVID susijusius skaitmeninius įrankius nedidelėse vietose, prieš juos išleidžiant platesnei studentų grupei. Procesas reikalauja nuolatinio [įrankį] naudojančių asmenų ir kūrėjų bendravimo, elementų, kurie suteikia galių kiekvienam sistemos dalyviui, ir švietimo visame pasaulyje, kad bendruomenės suprastų, kaip protingai naudoti turimus įrankius.
Ilgalaikės investicijos yra ypač sudėtingos JAV valstijų visuomenės sveikatos departamentams, kurie buvo dešimtmečius iki pandemijos buvo nepakankamai finansuojama . Visuomenės sveikatos institucijoms nepavyko išlaikyti pranešimų per tam tikrą laiką, kad pritrauktų žmones atsisiųsti programėlę, sako Jenny Wanger, programinės įrangos kūrimo tinklo Linux Foundation Public Health programas naudojanti COVID technologiją.
Šis pasitikėjimo stiprinimo būdas ypač svarbus marginalizuotoms bendruomenėms, kurios turi daug teisėtų priežasčių nepasitikėti vyriausybe. Nors neturime jokių demografinių duomenų apie pranešimų apie galimą kontaktą naudotojus, Sabeti atkreipia dėmesį į tai, kad jie taip pat gali būti mažiau pasirengę naudoti šią technologiją, o tai daro didelę įtaką šių įrankių įsisavinimui ir bendram efektyvumui.
Vis dar bandomajame etape
Net ir atlikus analizę, vis dar sunku atsakyti į šį esminį klausimą: kiek infekcijų iš tikrųjų buvo išvengta pranešus apie poveikį?
Mūsų nesugebėjimas atsakyti į šį klausimą iš dalies yra dėl sistemos suskaidymo. Tačiau taip yra ir todėl, kad konkretūs šios technologijos efektyvumo matavimo tyrimai tiesiog nebuvo prioritetas.
MIT kibernetinio saugumo tyrinėtojas Rafi Yahalomas teigia, kad nors JK ir Šveicarijos analizės rodo, kad pranešimai apie poveikį turėjo potencialiai reikšmingą poveikį plitimui, jis norėtų, kad šie tyrimai būtų pakartoti JAV ir kitose bendruomenėse, kuriose aktyvinimo lygis yra mažesnis.
Ir jis sako, kad jei valstybės būtų norėjusios tai padaryti, jos būtų galėjusios sugalvoti paprastą įvertinimą: kai kas nors ateina atlikti COVID testo, paklauskite, ar gavo pranešimą apie kontaktą. Toks tyrimas gali padėti nustatyti, ar tie, kuriems pranešta, iš tikrųjų yra labiau užsikrėtę. Galų gale vis dar yra daug klausimų, kaip turėtų būti sukonfigūruota „Bluetooth“ sistema – iš pradžių ji buvo pagrįsta CDC nurodymais, kuriuose teigiama, kad 15 minučių trukmės, iki 6 pėdų gylio sąveika kelia infekcijos pavojų, ir dabar žinome, tikrieji infekcijos modeliai yra daug sudėtingesni.
Taigi kodėl jokia JAV visuomenės sveikatos agentūra neatliko tokio tyrimo? Kalbama apie prioritetus. Valstybės departamentai neturėjo laiko ar išteklių pažiūrėti, kaip veikia skaitmeninis kontaktų sekimas; vietoj to jie buvo susitelkę į bet ką ir viską, kad sustabdytų viruso plitimą.
Galutinis [pranešimų apie kontaktą su užsikrėtusiu asmeniu] tikslas yra, kad daugiau žmonių sužinotų, kad jie buvo paveikti, sako Hanna Sherrill, Eagleton mokslo ir politikos bendradarbis Rutgers universitete, kuris dirbo su Naujojo Džersio visuomenės sveikatos agentūra kuriant pranešimų apie poveikį sistemai. Tikimės, kad kai kurie iš jų pasinaudos patarimu karantinuoti ir tada sustabdys plitimą. Net jei tai daro vienas ar du žmonės, mūsų požiūriu tai yra geras dalykas.
Kiti valstijos visuomenės sveikatos darbuotojai, atsakę į „Technology Review“ duomenų užklausas, pakartojo jos nuostatą, o jų požiūris rodo, kad skaitmeninis kontaktų atsekimas JAV vis dar gali būti bandomas. Turime 26 skirtingus prototipus, išbandytus 26 skirtingose bendruomenėse ir vis dar bandome suprasti rezultatus.
Sabeti sako, kad JAV esamos programos ir įrankiai niekada nepasiekė tokio pritaikymo lygio, kurio reikia, kad jie būtų naudingi. Tačiau tokia sėkmė gali būti nepasiekiama būsimoms visuomenės sveikatos krizėms.
Ji mano, kad dėl būsimų krizių gali reikėti glaudžiai susieti skaitmeninių kontaktų sekimą su genomo sekos nustatymu ir kitais stebėjimo metodais. Kolorado Mesa universitetas turi buvo tokios sistemos pradininkas padedant Sabeti ir likusiai Broad Institute. Mokyklos COVID stebėjimas apima sekos duomenis, gautus iš mokinių testų, apie savarankiškai praneštus mokinio simptomus, nuotekų tyrimus, kontaktų atsekimą ir dar daugiau – visa tai sudaro geografiniai karščio žemėlapiai, kuriuos administratoriai gali naudoti norėdami tiksliai nustatyti protrūkius, kol jie nepasunkia.
Jie jau galvoja, kaip mokyklos sistemą būtų galima išplėsti kitoms bendruomenėms. Jei Amerika dabar investuos į šias technologijas, patobulins tuos prototipus ir sukurs bendruomenės pasitikėjimą, ji gali būti pasirengusi kitai pandemijai.
Ji sako, kad tikrai įmanoma pasiekti tašką, kur turime tikrą pranašumą kovojant su virusais, bendradarbiaudami kaip bendruomenė, siekdami sekti viruso plitimą bet kurioje pasaulio vietoje.
Ši istorija yra Pandemijos technologijų projekto, remiamo Rokfelerio fondo, dalis.