| 講演抄録/キーワード |
| 講演名 |
2025-12-04 09:00
交渉シナリオデータセットを用いた選好順序予測 ○長谷川皓一・奥原 俊(三重大) Consen2025-15 |
| 抄録 |
(和) |
大規模言語モデル(LLM)は、高度な言語理解力と推論能力を持ち、自然言語処理(NLP)分野で広く応用されている。交渉は、日常生活、ビジネス、国際関係など多様な場面で重要な役割を果たす。そして交渉において交渉相手の選好順序を把握することは非常に重要である。しかし、現在のLLMは最大尤度推定(MLE)に基づく学習を行っており、生成される文章内容は確率的なモデルに基づいて決定される。そのため、LLMを用いて交渉者の選好順序を把握することは非常に難しい。この課題を解決するために本研究では、交渉データセット「CaSiNoデータセット」を用いて、LLMのプロンプトエンジニアリングによる選好順序の推定を行う。
CaSiNoデータセットには、キャンプ場における1030件の交渉記録が含まれており、2人の交渉参加者がテキストメッセージを用いて、 水 ・ 食料 ・ 薪 の取引を行う。交渉者には、物資の選好順序 /{High, Medium, Low /}が与えられており、その選好順序に基づいた物資獲得を目指す交渉を行う。
本研究では、LLMとしてMeta社の「Llama 3.3-70B」を使用する。プロンプトエンジニアリングを行い、交渉者の対話から 水 ・ 食料 ・ 薪 の選好順序を推定することを試みる。提案手法として、第一に交渉会話の全文をそのままLLMに入力し選好順序を推定する 「直接推定法」 と、第二にLLMを用いて交渉会話を要約した後に選好順序を推測する 「要約推定法」 の2種類を設計し、比較を行う。正解率(Accuracy)、平均絶対誤差(MAE)、Spearmanの順位相関係数を評価指標として、各手法の性能を測定する。
実験の結果、「要約推定法」は「直接推定法」よりも高い精度を示した。正解率の向上、平均絶対誤差の低減、Spearmanの順位相関係数の上昇など、各項目でより良い結果が確認された。実験結果から、交渉会話の要点をまとめることで、重要な情報が抽出され、選好順序の推定の精度が向上したと考えられる。
本研究の成果は、LLMを活用した交渉者の選好順序の推定の精度向上に寄与する可能性がある。しかし、現時点の選好順序推定の正解率は低く、さらなる改善は必須である。今後の課題としては、LLMによる要約の精度向上、発言単位の分析によるプロンプト設計など、新たな手法の開発が求められる。
今後の研究において、LLMの選好順序を推定する能力の向上、そしてLLMを活用した交渉支援システムの発展を期待する。 |
| (英) |
|
| キーワード |
(和) |
プロンプトエンジニアリング / 交渉シナリオデータセット / 大規模言語モデル / 選好順序推定 / 要約推定法 / / / |
| (英) |
/ / / / / / / |
| 文献情報 |
信学技報, vol. 125, no. 272, Consen2025-15, pp. 1-5, 2025年12月. |
| 資料番号 |
Consen2025-15 |
| 発行日 |
2025-11-27 (Consen) |
| ISSN |
Online edition: ISSN 2432-6380 |
著作権に ついて |
技術研究報告に掲載された論文の著作権は電子情報通信学会に帰属します.(許諾番号:10GA0019/12GB0052/13GB0056/17GB0034/18GB0034) |
| PDFダウンロード |
Consen2025-15 |
| 研究会情報 |
| 研究会 |
Consen |
| 開催期間 |
2025-12-04 - 2025-12-04 |
| 開催地(和) |
アオーレ長岡(新潟県長岡市) |
| 開催地(英) |
|
| テーマ(和) |
合意と共創、一般 |
| テーマ(英) |
Consensus and Cocreation, etc. |
| 講演論文情報の詳細 |
| 申込み研究会 |
Consen |
| 会議コード |
2025-12-Consen |
| 本文の言語 |
日本語(英語タイトルなし) |
| タイトル(和) |
交渉シナリオデータセットを用いた選好順序予測 |
| サブタイトル(和) |
|
| タイトル(英) |
|
| サブタイトル(英) |
|
| キーワード(1)(和/英) |
プロンプトエンジニアリング / |
| キーワード(2)(和/英) |
交渉シナリオデータセット / |
| キーワード(3)(和/英) |
大規模言語モデル / |
| キーワード(4)(和/英) |
選好順序推定 / |
| キーワード(5)(和/英) |
要約推定法 / |
| キーワード(6)(和/英) |
/ |
| キーワード(7)(和/英) |
/ |
| キーワード(8)(和/英) |
/ |
| 第1著者 氏名(和/英/ヨミ) |
長谷川 皓一 / / ハセガワ コウイチ |
| 第1著者 所属(和/英) |
三重大学 (略称: 三重大)
(略称: ) |
| 第2著者 氏名(和/英/ヨミ) |
奥原 俊 / / |
| 第2著者 所属(和/英) |
三重大学 (略称: 三重大)
(略称: ) |
| 第3著者 氏名(和/英/ヨミ) |
/ / |
| 第3著者 所属(和/英) |
(略称: )
(略称: ) |
| 第4著者 氏名(和/英/ヨミ) |
/ / |
| 第4著者 所属(和/英) |
(略称: )
(略称: ) |
| 第5著者 氏名(和/英/ヨミ) |
/ / |
| 第5著者 所属(和/英) |
(略称: )
(略称: ) |
| 第6著者 氏名(和/英/ヨミ) |
/ / |
| 第6著者 所属(和/英) |
(略称: )
(略称: ) |
| 第7著者 氏名(和/英/ヨミ) |
/ / |
| 第7著者 所属(和/英) |
(略称: )
(略称: ) |
| 第8著者 氏名(和/英/ヨミ) |
/ / |
| 第8著者 所属(和/英) |
(略称: )
(略称: ) |
| 第9著者 氏名(和/英/ヨミ) |
/ / |
| 第9著者 所属(和/英) |
(略称: )
(略称: ) |
| 第10著者 氏名(和/英/ヨミ) |
/ / |
| 第10著者 所属(和/英) |
(略称: )
(略称: ) |
| 第11著者 氏名(和/英/ヨミ) |
/ / |
| 第11著者 所属(和/英) |
(略称: )
(略称: ) |
| 第12著者 氏名(和/英/ヨミ) |
/ / |
| 第12著者 所属(和/英) |
(略称: )
(略称: ) |
| 第13著者 氏名(和/英/ヨミ) |
/ / |
| 第13著者 所属(和/英) |
(略称: )
(略称: ) |
| 第14著者 氏名(和/英/ヨミ) |
/ / |
| 第14著者 所属(和/英) |
(略称: )
(略称: ) |
| 第15著者 氏名(和/英/ヨミ) |
/ / |
| 第15著者 所属(和/英) |
(略称: )
(略称: ) |
| 第16著者 氏名(和/英/ヨミ) |
/ / |
| 第16著者 所属(和/英) |
(略称: )
(略称: ) |
| 第17著者 氏名(和/英/ヨミ) |
/ / |
| 第17著者 所属(和/英) |
(略称: )
(略称: ) |
| 第18著者 氏名(和/英/ヨミ) |
/ / |
| 第18著者 所属(和/英) |
(略称: )
(略称: ) |
| 第19著者 氏名(和/英/ヨミ) |
/ / |
| 第19著者 所属(和/英) |
(略称: )
(略称: ) |
| 第20著者 氏名(和/英/ヨミ) |
/ / |
| 第20著者 所属(和/英) |
(略称: )
(略称: ) |
| 第21著者 氏名(和/英/ヨミ) |
/ / |
| 第21著者 所属(和/英) |
(略称: )
(略称: ) |
| 第22著者 氏名(和/英/ヨミ) |
/ / |
| 第22著者 所属(和/英) |
(略称: )
(略称: ) |
| 第23著者 氏名(和/英/ヨミ) |
/ / |
| 第23著者 所属(和/英) |
(略称: )
(略称: ) |
| 第24著者 氏名(和/英/ヨミ) |
/ / |
| 第24著者 所属(和/英) |
(略称: )
(略称: ) |
| 第25著者 氏名(和/英/ヨミ) |
/ / |
| 第25著者 所属(和/英) |
(略称: )
(略称: ) |
| 第26著者 氏名(和/英/ヨミ) |
/ / |
| 第26著者 所属(和/英) |
(略称: )
(略称: ) |
| 第27著者 氏名(和/英/ヨミ) |
/ / |
| 第27著者 所属(和/英) |
(略称: )
(略称: ) |
| 第28著者 氏名(和/英/ヨミ) |
/ / |
| 第28著者 所属(和/英) |
(略称: )
(略称: ) |
| 第29著者 氏名(和/英/ヨミ) |
/ / |
| 第29著者 所属(和/英) |
(略称: )
(略称: ) |
| 第30著者 氏名(和/英/ヨミ) |
/ / |
| 第30著者 所属(和/英) |
(略称: )
(略称: ) |
| 第31著者 氏名(和/英/ヨミ) |
/ / |
| 第31著者 所属(和/英) |
(略称: )
(略称: ) |
| 第32著者 氏名(和/英/ヨミ) |
/ / |
| 第32著者 所属(和/英) |
(略称: )
(略称: ) |
| 第33著者 氏名(和/英/ヨミ) |
/ / |
| 第33著者 所属(和/英) |
(略称: )
(略称: ) |
| 第34著者 氏名(和/英/ヨミ) |
/ / |
| 第34著者 所属(和/英) |
(略称: )
(略称: ) |
| 第35著者 氏名(和/英/ヨミ) |
/ / |
| 第35著者 所属(和/英) |
(略称: )
(略称: ) |
| 第36著者 氏名(和/英/ヨミ) |
/ / |
| 第36著者 所属(和/英) |
(略称: )
(略称: ) |
| 講演者 |
第1著者 |
| 発表日時 |
2025-12-04 09:00:00 |
| 発表時間 |
25分 |
| 申込先研究会 |
Consen |
| 資料番号 |
Consen2025-15 |
| 巻番号(vol) |
vol.125 |
| 号番号(no) |
no.272 |
| ページ範囲 |
pp.1-5 |
| ページ数 |
5 |
| 発行日 |
2025-11-27 (Consen) |
|