ご案内 入会して研究会活動をもっとお得に!研究会参加費・年間登録費が会員価格になります。
お知らせ 【重要】研究会参加費の支払いおよび原稿アップロード手続きの変更に関するご案内【1種研のみ】
電子情報通信学会 研究会発表申込システム
講演論文 詳細
技報閲覧サービス
[ログイン]
技報アーカイブ
 トップに戻る 前のページに戻る   [Japanese] / [English] 

講演抄録/キーワード
講演名 2026-10-08 13:00
会話履歴の参照と評価基準の開示がLLMによる貢献度推定に与える影響
○能勢山凌大・片岡 悠・馬場元岐・板野竜也・小比賀亮仁・小板隆浩(同志社大) ICTSSL2026-17
抄録 (和) クラウドソーシングでは作業単位で報酬が確定するため,事業が後に生む収益は働き手に分配されない.作業単位で報酬が確定する仕組みに対し,収益化後に貢献度に応じて報酬を分配する仕組みが提案されている.仕
組みの成立には参加者が納得できる貢献度の算出が必要であり,人手による評価の負担と偏りに対処する手段として,大規模言語モデル(LLM)を評価器として用いることが提案されている.LLM による評価は入力する記録と評価基準に依存し,成果物と変更履歴だけでは議論の調整や作業方針の決定を捉えられない.また,評価基準の開示は参加者の行動を変え,評価の対象となる記録にも影響する.本研究では,会話履歴を入力に加えたときの推定貢献率の変化と,会話履歴の参照および評価基準の開示が参加者の納得感に与える影響を調査する.クラウドソーシングで募集した4 名1 組のチームに非同期の共同作業を依頼し,成果物,変更履歴,会話履歴を用いてLLM で貢献率を推定し,納得感を調査する. 
(英) On crowdsourcing platforms, rewards are fixed per task, so the revenue a project later generates is not distributed to the workers. Against this arrangement, a platform has been proposed that distributes rewards according to contribution once a project generates revenue. Such a platform requires contribution estimates that participants accept, and using a large language model (LLM) as the estimator has been proposed as a way of addressing the cost and bias of human evaluation. Estimation by an LLM depends on the records given as input and on the evaluation criteria: the artifact and its change history alone do not capture work such as coordinating discussion or deciding on conventions. Disclosing the criteria also changes how participants behave, and thereby the records that are evaluated. We investigate how the estimated shares change when conversation logs are added to the input, and how access to the logs and disclosure of the criteria affect participants’ acceptance of the result. Teams of four recruited on a crowdsourcing platform collaborate asynchronously, an LLM estimates contribution shares from the artifact, the change history and the conversation log, and each participant is asked how far they accept the result.
キーワード (和) 貢献度推定 / 大規模言語モデル / 協調作業 / 報酬分配 / 納得感 / クラウドソーシング / /  
(英) contribution estimation / large language models / computer-supported cooperative work / reward allocation / perceived fairness / crowdsourcing / /  
文献情報 信学技報, vol. 126, no. 186, ICTSSL2026-17, pp. 1-6, 2026年10月.
資料番号 ICTSSL2026-17 
発行日 2026-10-01 (ICTSSL) 
ISSN Online edition: ISSN 2432-6380
著作権に
ついて
技術研究報告に掲載された論文の著作権は電子情報通信学会に帰属します.(許諾番号:10GA0019/12GB0052/13GB0056/17GB0034/18GB0034)
PDFダウンロード ICTSSL2026-17

研究会情報
研究会 ICTSSL  
開催期間 2026-10-08 - 2026-10-09 
開催地(和) 新潟大学 駅南キャンパス ときめいと 
開催地(英)  
テーマ(和) 一般 
テーマ(英)  
講演論文情報の詳細
申込み研究会 ICTSSL 
会議コード 2026-10-ICTSSL 
本文の言語 日本語 
タイトル(和) 会話履歴の参照と評価基準の開示がLLMによる貢献度推定に与える影響 
サブタイトル(和)  
タイトル(英) Effects of Conversation Log Access and Rubric Disclosure on LLM-Based Contribution Estimation 
サブタイトル(英)  
キーワード(1)(和/英) 貢献度推定 / contribution estimation  
キーワード(2)(和/英) 大規模言語モデル / large language models  
キーワード(3)(和/英) 協調作業 / computer-supported cooperative work  
キーワード(4)(和/英) 報酬分配 / reward allocation  
キーワード(5)(和/英) 納得感 / perceived fairness  
キーワード(6)(和/英) クラウドソーシング / crowdsourcing  
キーワード(7)(和/英) /  
キーワード(8)(和/英) /  
第1著者 氏名(和/英/ヨミ) 能勢山 凌大 / Ryota Noseyama / ノセヤマ リョウタ
第1著者 所属(和/英) 同志社大学 (略称: 同志社大)
Doshisha University (略称: Doshisha Univ.)
第2著者 氏名(和/英/ヨミ) 片岡 悠 / Haruka Kataoka / カタオカ ハルカ
第2著者 所属(和/英) 同志社大学 (略称: 同志社大)
Doshisha University (略称: Doshisha Univ.)
第3著者 氏名(和/英/ヨミ) 馬場 元岐 / Motoki Bamba / バンバ モトキ
第3著者 所属(和/英) 同志社大学 (略称: 同志社大)
Doshisha University (略称: Doshisha Univ.)
第4著者 氏名(和/英/ヨミ) 板野 竜也 / Ryuya Itano / イタノ リュウヤ
第4著者 所属(和/英) 同志社大学 (略称: 同志社大)
Doshisha University (略称: Doshisha Univ.)
第5著者 氏名(和/英/ヨミ) 小比賀 亮仁 / Akihito Kohiga / コヒガ アキヒト
第5著者 所属(和/英) 同志社大学 (略称: 同志社大)
Doshisha University (略称: Doshisha Univ.)
第6著者 氏名(和/英/ヨミ) 小板 隆浩 / Takahiro Koita / コイタ タカヒロ
第6著者 所属(和/英) 同志社大学 (略称: 同志社大)
Doshisha University (略称: Doshisha Univ.)
第7著者 氏名(和/英/ヨミ) / /
第7著者 所属(和/英) (略称: )
(略称: )
第8著者 氏名(和/英/ヨミ) / /
第8著者 所属(和/英) (略称: )
(略称: )
第9著者 氏名(和/英/ヨミ) / /
第9著者 所属(和/英) (略称: )
(略称: )
第10著者 氏名(和/英/ヨミ) / /
第10著者 所属(和/英) (略称: )
(略称: )
第11著者 氏名(和/英/ヨミ) / /
第11著者 所属(和/英) (略称: )
(略称: )
第12著者 氏名(和/英/ヨミ) / /
第12著者 所属(和/英) (略称: )
(略称: )
第13著者 氏名(和/英/ヨミ) / /
第13著者 所属(和/英) (略称: )
(略称: )
第14著者 氏名(和/英/ヨミ) / /
第14著者 所属(和/英) (略称: )
(略称: )
第15著者 氏名(和/英/ヨミ) / /
第15著者 所属(和/英) (略称: )
(略称: )
第16著者 氏名(和/英/ヨミ) / /
第16著者 所属(和/英) (略称: )
(略称: )
第17著者 氏名(和/英/ヨミ) / /
第17著者 所属(和/英) (略称: )
(略称: )
第18著者 氏名(和/英/ヨミ) / /
第18著者 所属(和/英) (略称: )
(略称: )
第19著者 氏名(和/英/ヨミ) / /
第19著者 所属(和/英) (略称: )
(略称: )
第20著者 氏名(和/英/ヨミ) / /
第20著者 所属(和/英) (略称: )
(略称: )
第21著者 氏名(和/英/ヨミ) / /
第21著者 所属(和/英) (略称: )
(略称: )
第22著者 氏名(和/英/ヨミ) / /
第22著者 所属(和/英) (略称: )
(略称: )
第23著者 氏名(和/英/ヨミ) / /
第23著者 所属(和/英) (略称: )
(略称: )
第24著者 氏名(和/英/ヨミ) / /
第24著者 所属(和/英) (略称: )
(略称: )
第25著者 氏名(和/英/ヨミ) / /
第25著者 所属(和/英) (略称: )
(略称: )
第26著者 氏名(和/英/ヨミ) / /
第26著者 所属(和/英) (略称: )
(略称: )
第27著者 氏名(和/英/ヨミ) / /
第27著者 所属(和/英) (略称: )
(略称: )
第28著者 氏名(和/英/ヨミ) / /
第28著者 所属(和/英) (略称: )
(略称: )
第29著者 氏名(和/英/ヨミ) / /
第29著者 所属(和/英) (略称: )
(略称: )
第30著者 氏名(和/英/ヨミ) / /
第30著者 所属(和/英) (略称: )
(略称: )
第31著者 氏名(和/英/ヨミ) / /
第31著者 所属(和/英) (略称: )
(略称: )
第32著者 氏名(和/英/ヨミ) / /
第32著者 所属(和/英) (略称: )
(略称: )
第33著者 氏名(和/英/ヨミ) / /
第33著者 所属(和/英) (略称: )
(略称: )
第34著者 氏名(和/英/ヨミ) / /
第34著者 所属(和/英) (略称: )
(略称: )
第35著者 氏名(和/英/ヨミ) / /
第35著者 所属(和/英) (略称: )
(略称: )
第36著者 氏名(和/英/ヨミ) / /
第36著者 所属(和/英) (略称: )
(略称: )
講演者 第1著者 
発表日時 2026-10-08 13:00:00 
発表時間 25分 
申込先研究会 ICTSSL 
資料番号 ICTSSL2026-17 
巻番号(vol) vol.126 
号番号(no) no.186 
ページ範囲 pp.1-6 
ページ数 6 
発行日 2026-10-01 (ICTSSL) 


[研究会発表申込システムのトップページに戻る]

[電子情報通信学会ホームページ]

(日本語ページの行間係数: 1)

IEICE / 電子情報通信学会