Duke Reporters’Labが、自動化されたファクトチェックプログラムを完成させるために政治的慣習をどのように使用したか

デュークレポーターズラボの礼儀

過去2週間の党大会は、 Tech＆Check Cooperative で デュークレポーターズラボ 自動化されたファクトチェックプログラムであるSquashとそのヒューマンコンポーネントであるGardenerを完成させるため。

Squashは、既存のファクトチェック間でリアルタイムの照合を行う人工知能プログラムです。 ClaimReview 、レポーターズラボのファクトチェックタグ付けシステム、およびライブスピーカーの声明。 Googleの組み合わせを使用しています スピーチからテキストへ ; ClaimBuster 、テキサス大学アーリントン校で開発されました。ファクトチェックで書かれた単語と話された単語を一致させるためのデューク独自のコーディング。これらのファクトチェックが画面にポップアップ表示され、議論されている問題について視聴者により多くのコンテキストを提供します。

ただし、ReportingLabの共同ディレクターであるBillAdairとMarkStencelは、 7月のニーマンラボ 、このシステムには欠点がないわけではありません。

「マイクが優れていて、人がはっきりと話している場合は、音声からテキストへの変換が非常に優れている場合がありますが、コミカルに悪いものがいくつかあります」とAdair氏は述べています。民主党全国大会でのロールコール投票中に、スカッシュはファクトチェックに一致しました 脇の下の汗 カンザスの投票に。

Reporters’Labの主任技術者であるChristopher Guess氏は、現在の技術では、コンピューターが政治家の話し方のニュアンスや文脈を理解することはできないと述べました。

「人間のファクトチェッカーは、多くの場合、これにどの角度でアプローチするのかを同僚と話し合います」とゲス氏は言います。 「それは、コンピューターでは文字通りできないことです。」

Gardenerは、この欠点に対処するためにSquashの上に構築されたTech＆Checkチームの新しいインターフェースです。 Squashは、ヒューマンアシスタント（「庭師」）に3つの潜在的な一致ファクトチェックを提供し、このファクトチェックを選択して視聴者に表示します。

「つまり、実際には、悪いものを取り除き、良いものを表示しているのです」とAdair氏は述べています。このプログラムはまだ始まったばかりであり、音声からテキストへのテクノロジーのマッチングと克服の障害を完成させることに加えて、AdairとGuessの両方が、テクノロジーを完成させるにはさらに多くのファクトチェックが必要であると述べています。

「以前にチェックされたクレームの大規模なコーパスに依存しています」とGuess氏は述べています。現在、ClaimReviewには約60,000件の請求のデータベースがありますが、Guess氏は、そのうちの約3分の1だけがアメリカの政治に関連していると述べています。 「機械学習の世界は通常、数万ではなく、数百万から数十億で機能します」とゲス氏は述べています。

追加のクレームを待っている間、チームはファクトチェックの一致を改善するための他の方法を実験しています。そのうちの1つは、Caucusと呼ばれるプログラムです。このプログラムは、ファクトチェックをカテゴリにグループ化し、音声からテキストにピックアップされたクレームと照合できます。

「つまり、この文はヘルスケアに関するものであり、これは政治に関するものであり、これはアイダホに関するものです」とゲス氏は述べています。 「同じカテゴリに分類されるクレームは、そうでないクレームよりも関連している可能性が高いという理論があります。」

Adairは、このテクノロジーがいつ一般に公開されるかについてタイムラインを作成しませんでした。 「私たちの目標は、準備が整うまでそれを改善し続けることです」と彼は言いました。 「私たちは3年間で多くの進歩を遂げました。そして、ここにいるすべての賢い人々と多くのことを行うことができます。」

Harrison Mantasは、ファクトチェックと誤った情報をカバーするInternationalFact-CheckingNetworkのレポーターです。で彼に到達する Eメール またはTwitterで @HarrisonMantas