Developers Summit 2018 「自然言語処理・機械学習を活用したファクトチェック業務の支援」を聞きました
2018/02/21
以下は、思ったことや気になったことをメモしていますので、必ずしも登壇者の発表内容やご意見ではないことを、ご承知おきください。
スピーカーはスマートニュースの小宮さん
目次
「フェイクニュース」と「ファクトチェック」とは
まず、「フェイクニュース」と「ファクトチェック」についての説明からでした。
フェイクニュースとは、意図的に虚偽の言説を含んだ情報。意図的でないものはフェイクニュースではない。
ファクトチェックとは公表されている言説に対して事実として正確かを検証すること。
フェイクニュースだけでなく色々なものが対象で、報道機関のニュース、webメディア発信、SNSの一般人の発言も。
「正しい/間違い」だけをチェックするのではなく、対象は何か、事実化誤りか、不正確か、ミスリーディングか、裏付けは何かなどをチェックする。
発信情報から探索情報(検索、フィルタリング、機械的に補足、1日1万以上)、端緒情報(人手のよるスクリーニング、探索情報1,000件あたり数件)を経てファクトチェック記事(予備調査、裏付け)を公開するまでが一連の手順。
探索情報の中から端緒情報を探し出すのは量的に辛い。
ファクトチェック支援システム検証
ファクトチェック支援システムの検証をしたのでここからはその話。
発信媒体はインターネットに限定、データソースはTwitter。
入力を探索情報にして、出力は端緒情報の可能性数値。
なので正例は端緒情報である、誤例は端緒情報でない、となる。
ファクトチェッカーはこの可能性数値が高い情報からスクリーニングする。
前処理で、ツイートからノイズとなる情報(タイトル、ハッシュタグなど)を除去する。
構成
オライリーの「仕事ではじめる機械学習」がおすすめの書籍。
GUIは探索結果を表示、
CollectorはTwitter APIでツイートを収集、
Learnerは学習用データセットをもとにモデルを構築する。
Predictorはモデルに基づいて端緒情報である確率を予測する。
Docker / Kurbernetesを利用してプロビジョニング、デプロイしている。
ファクトチェック・イニシアティブ活動は参加、支援出来るらしい。
最後までお読みいただきましてありがとうございました!
「AWS認定資格試験テキスト&問題集 AWS認定ソリューションアーキテクト - プロフェッショナル 改訂第2版」という本を書きました。
「AWS認定資格試験テキスト AWS認定クラウドプラクティショナー 改訂第2版」という本を書きました。
「ポケットスタディ AWS認定 デベロッパーアソシエイト [DVA-C02対応] 」という本を書きました。
「要点整理から攻略するAWS認定ソリューションアーキテクト-アソシエイト」という本を書きました。
「AWSではじめるLinux入門ガイド」という本を書きました。
開発ベンダー5年、ユーザ企業システム部門通算9年、ITインストラクター5年目でプロトタイプビルダーもやりだしたSoftware Engineerです。
質問はコメントかSNSなどからお気軽にどうぞ。
出来る限りなるべく答えます。
このブログの内容/発言の一切は個人の見解であり、所属する組織とは関係ありません。
このブログは経験したことなどの共有を目的としており、手順や結果などを保証するものではありません。
ご参考にされる際は、読者様自身のご判断にてご対応をお願いいたします。
また、勉強会やイベントのレポートは自分が気になったことをメモしたり、聞いて思ったことを書いていますので、登壇者の意見や発表内容ではありません。
ad
ad
関連記事
-
「kintone Café 大阪 Vol.8 〜夏の事例祭り!〜」に行ってきました
「kintone Café 大阪 Vol.8 〜夏の事例祭り!〜」に行ってきまし …
-
「Serverless Days Tokyo 2023 The future is serverless」を見ました
2023/9/23にServerless Days Tokyo 2023に参加し …
-
JAWS DAYS 2018 振り返り(特にコミュニティフレンドシップ)
JAWS DAYS 2018を振り返りたいと思います。 やったこと コミュニティ …
-
「コミュニティリーダーズサミット in 高知 2023初鰹編」に参加しました
始まりました! 今回のテーマは「旗を立てる ~Raise Your Flag~」 …
-
AWS Summit 2016 Tokyoに参加してきました (前日 ~ Day1)
AWS Summit 2016 Tokyoにて、セッション聴講、ブース展示拝見、 …
-
2018年もありがとうございました
今年も皆さまありがとうございました。 ということで、まだもうちょっといろいろやる …
-
「自ら修羅の道を作り、修羅場を楽しみ、自内外に変化を起こし続ける」(『ソフトウェアファースト』読書感想)
「ソフトウェア・ファースト あらゆるビジネスを一変させる最強戦略」を読みました。 …
-
JINS MEME DEVELOPER HANDS-ON #5に行ってきました
世界初、自分を見るアイウェアの「JINS MEME」のSDK勉強会に行ってきまし …
-
MonotaRO TechTalk #4「データ分析」に行ってきました
本日の一杯目。MonotaRO TechTalk #4「データ分析」もちろん呑み …
-
「CLS高知2023戻り鰹編」に参加しました
12回目のCLS高知、2023戻り鰹編に参加しました。 高知駅付近から弁天座へ自 …