| 講演抄録/キーワード |
| 講演名 |
2024-08-23 13:30
言説の真偽判定のためのLLMを用いたスタンス検出手法の評価 ○佐々木佑樹・佐久間義友・大木憲二・北島信哉(富士通) SWIM2024-7 SC2024-15 |
| 抄録 |
(和) |
近年,Web上で真偽不明な言説が拡散することで不利益が発生して社会問題となっており,発信された言説が事実かどうかを調査する作業であるファクトチェックの重要性が高まっている.
人手でのファクトチェックは膨大な時間がかかることから,自動ファクトチェック手法が研究されている.
なかでも,あるターゲットとなる言説について言及している他の言説が,ターゲットを肯定しているかどうかを判定するタスクであるスタンス検出は,重要な要素とみなされている.
我々の研究グループではこれまでに,LLMと検索エンジンを用いた真偽判定システムを提案しており,真偽判定手法の一部としてLLMを利用したスタンス検出手法を用いている.
本稿では,真偽判定手法の評価用データセットを,スタンス検出手法の評価用に拡張したデータセットを用いて,LLMを利用したスタンス検出手法の評価を行う.
誤判定した項目について原因を分析した結果,LLMを用いたスタンス検出手法では,数値や時制,比較表現,地名などの取り扱いに課題があることがわかった. |
| (英) |
(Not available yet) |
| キーワード |
(和) |
スタンス検出 / 大規模言語モデル / フェイクニュース / ファクトチェック / / / / |
| (英) |
/ / / / / / / |
| 文献情報 |
信学技報, vol. 124, no. 160, SC2024-15, pp. 1-6, 2024年8月. |
| 資料番号 |
SC2024-15 |
| 発行日 |
2024-08-16 (SWIM, SC) |
| ISSN |
Online edition: ISSN 2432-6380 |
著作権に ついて |
技術研究報告に掲載された論文の著作権は電子情報通信学会に帰属します.(許諾番号:10GA0019/12GB0052/13GB0056/17GB0034/18GB0034) |
| PDFダウンロード |
SWIM2024-7 SC2024-15 |
| 研究会情報 |
| 研究会 |
SWIM SC |
| 開催期間 |
2024-08-23 - 2024-08-23 |
| 開催地(和) |
機械振興会館 |
| 開催地(英) |
Kikai-Shinko-Kaikan Bldg. |
| テーマ(和) |
ソサエティ5.0に向けたサービスコンピューティングとインタプライズモデル化技術, 一般 |
| テーマ(英) |
Services Computing and Interprise Modeling Technology for Society 5.0, General |
| 講演論文情報の詳細 |
| 申込み研究会 |
SC |
| 会議コード |
2024-08-SWIM-SC |
| 本文の言語 |
日本語 |
| タイトル(和) |
言説の真偽判定のためのLLMを用いたスタンス検出手法の評価 |
| サブタイトル(和) |
|
| タイトル(英) |
Evaluation of stance detection with LLM for veracity prediction of claims |
| サブタイトル(英) |
|
| キーワード(1)(和/英) |
スタンス検出 / |
| キーワード(2)(和/英) |
大規模言語モデル / |
| キーワード(3)(和/英) |
フェイクニュース / |
| キーワード(4)(和/英) |
ファクトチェック / |
| キーワード(5)(和/英) |
/ |
| キーワード(6)(和/英) |
/ |
| キーワード(7)(和/英) |
/ |
| キーワード(8)(和/英) |
/ |
| 第1著者 氏名(和/英/ヨミ) |
佐々木 佑樹 / Yuki Sasaki / ササキ ユウキ |
| 第1著者 所属(和/英) |
富士通株式会社 (略称: 富士通)
Fujitsu Limited (略称: Fujitsu) |
| 第2著者 氏名(和/英/ヨミ) |
佐久間 義友 / Yoshitomo Sakuma / サクマ ヨシトモ |
| 第2著者 所属(和/英) |
富士通株式会社 (略称: 富士通)
Fujitsu Limited (略称: Fujitsu) |
| 第3著者 氏名(和/英/ヨミ) |
大木 憲二 / Kenji Oki / オオキ ケンジ |
| 第3著者 所属(和/英) |
富士通株式会社 (略称: 富士通)
Fujitsu Limited (略称: Fujitsu) |
| 第4著者 氏名(和/英/ヨミ) |
北島 信哉 / Shinya Kitajima / キタジマ シンヤ |
| 第4著者 所属(和/英) |
富士通株式会社 (略称: 富士通)
Fujitsu Limited (略称: Fujitsu) |
| 第5著者 氏名(和/英/ヨミ) |
/ / |
| 第5著者 所属(和/英) |
(略称: )
(略称: ) |
| 第6著者 氏名(和/英/ヨミ) |
/ / |
| 第6著者 所属(和/英) |
(略称: )
(略称: ) |
| 第7著者 氏名(和/英/ヨミ) |
/ / |
| 第7著者 所属(和/英) |
(略称: )
(略称: ) |
| 第8著者 氏名(和/英/ヨミ) |
/ / |
| 第8著者 所属(和/英) |
(略称: )
(略称: ) |
| 第9著者 氏名(和/英/ヨミ) |
/ / |
| 第9著者 所属(和/英) |
(略称: )
(略称: ) |
| 第10著者 氏名(和/英/ヨミ) |
/ / |
| 第10著者 所属(和/英) |
(略称: )
(略称: ) |
| 第11著者 氏名(和/英/ヨミ) |
/ / |
| 第11著者 所属(和/英) |
(略称: )
(略称: ) |
| 第12著者 氏名(和/英/ヨミ) |
/ / |
| 第12著者 所属(和/英) |
(略称: )
(略称: ) |
| 第13著者 氏名(和/英/ヨミ) |
/ / |
| 第13著者 所属(和/英) |
(略称: )
(略称: ) |
| 第14著者 氏名(和/英/ヨミ) |
/ / |
| 第14著者 所属(和/英) |
(略称: )
(略称: ) |
| 第15著者 氏名(和/英/ヨミ) |
/ / |
| 第15著者 所属(和/英) |
(略称: )
(略称: ) |
| 第16著者 氏名(和/英/ヨミ) |
/ / |
| 第16著者 所属(和/英) |
(略称: )
(略称: ) |
| 第17著者 氏名(和/英/ヨミ) |
/ / |
| 第17著者 所属(和/英) |
(略称: )
(略称: ) |
| 第18著者 氏名(和/英/ヨミ) |
/ / |
| 第18著者 所属(和/英) |
(略称: )
(略称: ) |
| 第19著者 氏名(和/英/ヨミ) |
/ / |
| 第19著者 所属(和/英) |
(略称: )
(略称: ) |
| 第20著者 氏名(和/英/ヨミ) |
/ / |
| 第20著者 所属(和/英) |
(略称: )
(略称: ) |
| 第21著者 氏名(和/英/ヨミ) |
/ / |
| 第21著者 所属(和/英) |
(略称: )
(略称: ) |
| 第22著者 氏名(和/英/ヨミ) |
/ / |
| 第22著者 所属(和/英) |
(略称: )
(略称: ) |
| 第23著者 氏名(和/英/ヨミ) |
/ / |
| 第23著者 所属(和/英) |
(略称: )
(略称: ) |
| 第24著者 氏名(和/英/ヨミ) |
/ / |
| 第24著者 所属(和/英) |
(略称: )
(略称: ) |
| 第25著者 氏名(和/英/ヨミ) |
/ / |
| 第25著者 所属(和/英) |
(略称: )
(略称: ) |
| 第26著者 氏名(和/英/ヨミ) |
/ / |
| 第26著者 所属(和/英) |
(略称: )
(略称: ) |
| 第27著者 氏名(和/英/ヨミ) |
/ / |
| 第27著者 所属(和/英) |
(略称: )
(略称: ) |
| 第28著者 氏名(和/英/ヨミ) |
/ / |
| 第28著者 所属(和/英) |
(略称: )
(略称: ) |
| 第29著者 氏名(和/英/ヨミ) |
/ / |
| 第29著者 所属(和/英) |
(略称: )
(略称: ) |
| 第30著者 氏名(和/英/ヨミ) |
/ / |
| 第30著者 所属(和/英) |
(略称: )
(略称: ) |
| 第31著者 氏名(和/英/ヨミ) |
/ / |
| 第31著者 所属(和/英) |
(略称: )
(略称: ) |
| 第32著者 氏名(和/英/ヨミ) |
/ / |
| 第32著者 所属(和/英) |
(略称: )
(略称: ) |
| 第33著者 氏名(和/英/ヨミ) |
/ / |
| 第33著者 所属(和/英) |
(略称: )
(略称: ) |
| 第34著者 氏名(和/英/ヨミ) |
/ / |
| 第34著者 所属(和/英) |
(略称: )
(略称: ) |
| 第35著者 氏名(和/英/ヨミ) |
/ / |
| 第35著者 所属(和/英) |
(略称: )
(略称: ) |
| 第36著者 氏名(和/英/ヨミ) |
/ / |
| 第36著者 所属(和/英) |
(略称: )
(略称: ) |
| 講演者 |
第1著者 |
| 発表日時 |
2024-08-23 13:30:00 |
| 発表時間 |
25分 |
| 申込先研究会 |
SC |
| 資料番号 |
SWIM2024-7, SC2024-15 |
| 巻番号(vol) |
vol.124 |
| 号番号(no) |
no.159(SWIM), no.160(SC) |
| ページ範囲 |
pp.1-6 |
| ページ数 |
6 |
| 発行日 |
2024-08-16 (SWIM, SC) |