| 講演抄録/キーワード |
| 講演名 |
2026-03-04 14:15
大規模言語モデルの学習データトレース ○鈴木 大・安藤剛寿(富士通) NS2025-244 |
| 抄録 |
(和) |
大規模言語モデル (LLM) の性能向上には,高品質なデータが必要不可欠である.しかし,そのような貴重なデータを持つ企業や組織は,自分たちのデータを使って学習したLLMが,意図しない用途で使われたり,無制限に公開されたりすることに懸念を感じており,データの提供や流通の妨げとなっている.そこで,データ提供者が定義した利用ポリシーに基づき,データとLLMのアクセスを制御する仕組みが求められている.しかし,LLM開発者の環境はブラックボックスであるため,データがどのLLMに学習されたかを外部からトレースできず,データの不正利用や問題発生時の検証が困難となっている.本稿では,データの提供から利用までの一連のライフサイクルにおいて,LLM開発者やLLM利用者等の複数のステークホルダーを横断して,データのトレーサビリティを実現するシステムを提案する.特に,LLMが学習したデータを識別するため,LLMに対して外部から入出力可能な情報のみを用いたウォーターマーク方式を提案し,実験評価によりその有効性を示す. |
| (英) |
High-quality data is essential for improving the performance of large language models (LLMs). However, companies and organizations that possess such valuable data are concerned that LLMs trained on their data may be used for unintended purposes or released without restriction, which hinders data provision and distribution. Therefore, there is a need for a mechanism to control access to data and LLMs based on usage policies defined by data providers. However, since the environment of LLM developers is a black box, it is impossible to externally trace which LLM the data was trained on, making it difficult to verify unauthorized use of data or problems when they occur. This paper proposes a system that achieves data traceability across multiple stakeholders, such as LLM developers and LLM users, throughout the entire lifecycle from data provision to utilization. In particular, to identify the data that LLMs have learned, we propose a watermarking method that uses only information that can be input and output externally to the LLM, and demonstrate its effectiveness through experimental evaluation. |
| キーワード |
(和) |
ウォーターマーク / トレーサビリティ / LLM / アクセス制御 / / / / |
| (英) |
Watermark / Traceability / LLM / Access control / / / / |
| 文献情報 |
信学技報, vol. 125, no. 385, NS2025-244, pp. 137-142, 2026年3月. |
| 資料番号 |
NS2025-244 |
| 発行日 |
2026-02-25 (NS) |
| ISSN |
Online edition: ISSN 2432-6380 |
著作権に ついて |
技術研究報告に掲載された論文の著作権は電子情報通信学会に帰属します.(許諾番号:10GA0019/12GB0052/13GB0056/17GB0034/18GB0034) |
| PDFダウンロード |
NS2025-244 |