| 講演抄録/キーワード |
| 講演名 |
2026-10-24 11:35
LLM対話ログからの学習プロセス定量化 ~ トピック遷移パターンの定量化と学習成果との関連 ~ ○喜屋武 泰・桝井文人・プタシンスキ ミハウ・エロネン ユーソ(北見工大) ET2026-30 |
| 抄録 |
(和) |
大学の授業課題において,学習者がLLMを学習支援に用いる場面が広がっている.しかし,その対話ログから学習者が「何を,どのような順序で学んでいるか」という学習内容の時系列的遷移を捉える研究は十分でない.本研究は,網羅性・回帰性・多様性という異なる観点からこの遷移を定量化する3指標(Topic Coverage・Revisitation Rate・Transition Entropy)による枠組みを提案した.知識構造に基づくオントロジーマッピングとデータ駆動的なBERTopic,2種類の埋め込みモデルを組み合わせた4条件で,米国大学AIコースのプログラミング課題に関する対話データセット(StudyChat)に適用し,課題横断の一貫性を確認した.本稿は,指標の性質の検証結果と,指標を改善する方向(概念に関する発話への限定,知識構造の拡張,発話の型の併用)を報告する. |
| (英) |
As university students increasingly use large language models (LLMs) to support their coursework, the temporal trajectory of what they learn and in what order remains underexplored. We propose a framework quantifying this transition using three metrics: Topic Coverage, Revisitation Rate, and Transition Entropy. Combining a knowledge-structure-based ontology and data-driven BERTopic with two embedding models under four conditions, we applied the framework to programming assignments in the StudyChat dataset from a U.S. university AI course and confirmed consistency across assignments. We report these validation results and directions for improving the metrics: restricting counts to concept-related messages, extending the knowledge structure, and adding utterance types as a second axis. |
| キーワード |
(和) |
LLM対話ログ / 学習プロセス分析 / トピック遷移 / 自己調整学習 / 教育データマイニング / / / |
| (英) |
LLM dialogue logs / learning process analysis / topic transition / self-regulated learning, / educational data mining / / / |
| 文献情報 |
信学技報, vol. 126, no. 209, ET2026-30, pp. 27-33, 2026年10月. |
| 資料番号 |
ET2026-30 |
| 発行日 |
2026-10-17 (ET) |
| ISSN |
Online edition: ISSN 2432-6380 |
著作権に ついて |
技術研究報告に掲載された論文の著作権は電子情報通信学会に帰属します.(許諾番号:10GA0019/12GB0052/13GB0056/17GB0034/18GB0034) |
| PDFダウンロード |
ET2026-30 |
| 研究会情報 |
| 研究会 |
ET |
| 開催期間 |
2026-10-24 - 2026-10-24 |
| 開催地(和) |
室蘭市中小企業センター |
| 開催地(英) |
Muroran City SME Center |
| テーマ(和) |
学習履歴データの蓄積・分析と視覚化/一般 |
| テーマ(英) |
Accumulation, Analysis, and Visualization of Learning Log Data, etc. |
| 講演論文情報の詳細 |
| 申込み研究会 |
ET |
| 会議コード |
2026-10-ET |
| 本文の言語 |
日本語 |
| タイトル(和) |
LLM対話ログからの学習プロセス定量化 |
| サブタイトル(和) |
トピック遷移パターンの定量化と学習成果との関連 |
| タイトル(英) |
Quantifying Learning Processes from LLM Dialogue Logs |
| サブタイトル(英) |
Topic Transition Patterns and Their Relationship to Learning Outcomes |
| キーワード(1)(和/英) |
LLM対話ログ / LLM dialogue logs |
| キーワード(2)(和/英) |
学習プロセス分析 / learning process analysis |
| キーワード(3)(和/英) |
トピック遷移 / topic transition |
| キーワード(4)(和/英) |
自己調整学習 / self-regulated learning, |
| キーワード(5)(和/英) |
教育データマイニング / educational data mining |
| キーワード(6)(和/英) |
/ |
| キーワード(7)(和/英) |
/ |
| キーワード(8)(和/英) |
/ |
| 第1著者 氏名(和/英/ヨミ) |
喜屋武 泰 / Yasushi Kyan / キャン ヤスシ |
| 第1著者 所属(和/英) |
北見工業大学 (略称: 北見工大)
Kitami Institute of Technology (略称: KIT) |
| 第2著者 氏名(和/英/ヨミ) |
桝井 文人 / Fumito Masui / マスイ フミト |
| 第2著者 所属(和/英) |
北見工業大学 (略称: 北見工大)
Kitami Institute of Technology (略称: KIT) |
| 第3著者 氏名(和/英/ヨミ) |
プタシンスキ ミハウ / Michal Ptaszynski / プタシンスキ ミハウ |
| 第3著者 所属(和/英) |
北見工業大学 (略称: 北見工大)
Kitami Institute of Technology (略称: KIT) |
| 第4著者 氏名(和/英/ヨミ) |
エロネン ユーソ / Juuso Eronen / エロネン ユーソ |
| 第4著者 所属(和/英) |
北見工業大学 (略称: 北見工大)
Kitami Institute of Technology (略称: KIT) |
| 第5著者 氏名(和/英/ヨミ) |
/ / |
| 第5著者 所属(和/英) |
(略称: )
(略称: ) |
| 第6著者 氏名(和/英/ヨミ) |
/ / |
| 第6著者 所属(和/英) |
(略称: )
(略称: ) |
| 第7著者 氏名(和/英/ヨミ) |
/ / |
| 第7著者 所属(和/英) |
(略称: )
(略称: ) |
| 第8著者 氏名(和/英/ヨミ) |
/ / |
| 第8著者 所属(和/英) |
(略称: )
(略称: ) |
| 第9著者 氏名(和/英/ヨミ) |
/ / |
| 第9著者 所属(和/英) |
(略称: )
(略称: ) |
| 第10著者 氏名(和/英/ヨミ) |
/ / |
| 第10著者 所属(和/英) |
(略称: )
(略称: ) |
| 第11著者 氏名(和/英/ヨミ) |
/ / |
| 第11著者 所属(和/英) |
(略称: )
(略称: ) |
| 第12著者 氏名(和/英/ヨミ) |
/ / |
| 第12著者 所属(和/英) |
(略称: )
(略称: ) |
| 第13著者 氏名(和/英/ヨミ) |
/ / |
| 第13著者 所属(和/英) |
(略称: )
(略称: ) |
| 第14著者 氏名(和/英/ヨミ) |
/ / |
| 第14著者 所属(和/英) |
(略称: )
(略称: ) |
| 第15著者 氏名(和/英/ヨミ) |
/ / |
| 第15著者 所属(和/英) |
(略称: )
(略称: ) |
| 第16著者 氏名(和/英/ヨミ) |
/ / |
| 第16著者 所属(和/英) |
(略称: )
(略称: ) |
| 第17著者 氏名(和/英/ヨミ) |
/ / |
| 第17著者 所属(和/英) |
(略称: )
(略称: ) |
| 第18著者 氏名(和/英/ヨミ) |
/ / |
| 第18著者 所属(和/英) |
(略称: )
(略称: ) |
| 第19著者 氏名(和/英/ヨミ) |
/ / |
| 第19著者 所属(和/英) |
(略称: )
(略称: ) |
| 第20著者 氏名(和/英/ヨミ) |
/ / |
| 第20著者 所属(和/英) |
(略称: )
(略称: ) |
| 第21著者 氏名(和/英/ヨミ) |
/ / |
| 第21著者 所属(和/英) |
(略称: )
(略称: ) |
| 第22著者 氏名(和/英/ヨミ) |
/ / |
| 第22著者 所属(和/英) |
(略称: )
(略称: ) |
| 第23著者 氏名(和/英/ヨミ) |
/ / |
| 第23著者 所属(和/英) |
(略称: )
(略称: ) |
| 第24著者 氏名(和/英/ヨミ) |
/ / |
| 第24著者 所属(和/英) |
(略称: )
(略称: ) |
| 第25著者 氏名(和/英/ヨミ) |
/ / |
| 第25著者 所属(和/英) |
(略称: )
(略称: ) |
| 第26著者 氏名(和/英/ヨミ) |
/ / |
| 第26著者 所属(和/英) |
(略称: )
(略称: ) |
| 第27著者 氏名(和/英/ヨミ) |
/ / |
| 第27著者 所属(和/英) |
(略称: )
(略称: ) |
| 第28著者 氏名(和/英/ヨミ) |
/ / |
| 第28著者 所属(和/英) |
(略称: )
(略称: ) |
| 第29著者 氏名(和/英/ヨミ) |
/ / |
| 第29著者 所属(和/英) |
(略称: )
(略称: ) |
| 第30著者 氏名(和/英/ヨミ) |
/ / |
| 第30著者 所属(和/英) |
(略称: )
(略称: ) |
| 第31著者 氏名(和/英/ヨミ) |
/ / |
| 第31著者 所属(和/英) |
(略称: )
(略称: ) |
| 第32著者 氏名(和/英/ヨミ) |
/ / |
| 第32著者 所属(和/英) |
(略称: )
(略称: ) |
| 第33著者 氏名(和/英/ヨミ) |
/ / |
| 第33著者 所属(和/英) |
(略称: )
(略称: ) |
| 第34著者 氏名(和/英/ヨミ) |
/ / |
| 第34著者 所属(和/英) |
(略称: )
(略称: ) |
| 第35著者 氏名(和/英/ヨミ) |
/ / |
| 第35著者 所属(和/英) |
(略称: )
(略称: ) |
| 第36著者 氏名(和/英/ヨミ) |
/ / |
| 第36著者 所属(和/英) |
(略称: )
(略称: ) |
| 講演者 |
第1著者 |
| 発表日時 |
2026-10-24 11:35:00 |
| 発表時間 |
20分 |
| 申込先研究会 |
ET |
| 資料番号 |
ET2026-30 |
| 巻番号(vol) |
vol.126 |
| 号番号(no) |
no.209 |
| ページ範囲 |
pp.27-33 |
| ページ数 |
7 |
| 発行日 |
2026-10-17 (ET) |
|