Kako je Duke Reporters’ Lab koristio političke konvencije da usavrši svoj automatizirani program provjere činjenica

Ljubaznošću Duke Reporters’ Lab

Političke konvencije protekla dva tjedna pružile su savršene uvjete za Tech & Check Cooperative kod Laboratorij novinara Dukea kako bi usavršio svoj automatizirani program za provjeru činjenica, Squash, i njegovu ljudsku komponentu, Gardener.

Squash je program umjetne inteligencije koji u stvarnom vremenu spaja postojeće provjere činjenica u Pregled zahtjeva , Reporters’ Lab-ov sustav označavanja za provjeru činjenica i izjave govornika uživo. Koristi kombinaciju Googleovih Pretvaranje govora u tekst ; ClaimBuster , koji je razvijen na Sveučilištu Texas u Arlingtonu; i Dukeovo vlastito kodiranje kako bi se uskladile riječi izgovorene s onima napisanim u provjeri činjenica. Ove provjere činjenica pojavljuju se na zaslonu kako bi gledateljima pružili više konteksta o svim pitanjima o kojima se raspravlja.

Međutim, kako su pisali sureditelji Reporting Laba Bill Adair i Mark Stencel Nieman Lab u srpnju , ovaj sustav nije bez nedostataka.

“Ponekad prijenos glasa u tekst može biti jako dobar ako je mikrofon dobar i osoba govori jasno, ali mi smo imali neke komično loše”, rekao je Adair. Tijekom prozivnog glasovanja na Demokratskoj nacionalnoj konvenciji, Squash se podudarao s provjerom činjenica znoj pazuha glasovima Kansasa.

Christopher Guess, vodeći tehnolog za Reporters’ Lab, rekao je da trenutna tehnologija ne dopušta računalu da razumije nijanse i kontekst načina na koji političari često govore.

'Ljudski provjeravač činjenica često šuška i razgovara s kolegama iz kojeg kuta ćete pristupiti ovome', rekao je Guess. 'To je nešto što računalo doslovno ne može učiniti.'

Gardener je novo sučelje koje je Tech & Check tim izgradio na vrhu Squasha kako bi riješio ovaj nedostatak. Squash pruža ljudskom pomoćniku ('Vrtlar') tri potencijalna provjera činjenica koje se podudaraju, koje ta osoba zatim odabire kako bi se prikazale gledateljima.

'Dakle, mi u stvari uklanjamo one loše i prikazujemo one dobre', rekao je Adair. Program je još uvijek u povojima, a osim usavršavanja usklađivanja i prevladavanja prepreka u tehnologiji glasa u tekst, i Adair i Guess kažu da im je potrebno još mnogo provjera činjenica kako bi mogli usavršiti tehnologiju.

'Oslanja se na veliki korpus prethodno provjerenih tvrdnji', rekao je Guess. Trenutačno ClaimReview ima bazu podataka s otprilike 60.000 tvrdnji, međutim, Guess je rekao da je samo oko trećine njih relevantno za američku politiku. “Svijet strojnog učenja obično radi u milijunima i milijardama, a ne u desecima tisuća”, rekao je Guess.

Dok čeka na dodatne tvrdnje, tim eksperimentira s drugim načinima poboljšanja utakmica provjere činjenica. Jedan od njih je program pod nazivom Caucus, koji grupira provjere činjenica u kategorije koje se zatim mogu upariti s tvrdnjama koje se preuzimaju glasovnim prijenosom u tekst.

'Recimo, dakle, da se ova rečenica odnosi na zdravstvenu skrb, ovo je na politiku, ovo je na Idaho', rekao je Guess. 'Imam teoriju da je vjerojatnije da će tvrdnje koje spadaju u iste kategorije biti povezane nego tvrdnje koje nisu.'

Adair ne bi postavio vremenski okvir kada će ova tehnologija biti dostupna javnosti. 'Naš cilj je samo nastaviti ga činiti boljim dok ne bude spreman', rekao je. 'Napravili smo mnogo napretka u tri godine i možete puno učiniti sa svim pametnim ljudima koje vidite ovdje.'

Harrison Mantas je novinar Međunarodne mreže za provjeru činjenica koja pokriva provjeru činjenica i dezinformacije. Dođite do njega na email ili na Twitteru na @HarrisonMantas