| 電子情報通信学会 研究会発表申込システム 講演論文 詳細 |
技報閲覧サービス [ログイン] 技報アーカイブ |
| トップに戻る | 前のページに戻る | [Japanese] / [English] |
| 講演抄録／キーワード | ||
| 講演名 | 2026-09-04 10:10 ネットワーク装置制御スクリプト生成のための言語仕様抽出における精度向上手法 ○平野達弥・井上寛規・藤原貴之（NTT）  NS2026-73 |
|
| 抄録 | （和） | 光伝送ネットワークでは，装置の機能分離およびマルチベンダ化の進展に伴い，装置間の差異を吸収できる統合的な制御が求められている． 我々は，各装置の制御コマンドを中間言語による制御スクリプトとして一律に表現し，このスクリプトを入力できるコントローラを開発している． 制御スクリプトの作成には専門知識と人的稼働を要するため，非公開の中間言語を扱えるローカルLLMを用いたスクリプト作成支援システムを研究している． 制御スクリプト生成精度を向上させるには，中間言語の仕様を過不足なくLLMへ与えることが重要であり，本稿では言語仕様の抽出精度向上手法を提案する． 提案方式では，複数検索クエリ生成および検索結果を用いたクエリ拡張により言語仕様抽出の網羅性を高め，不正確な抽出情報は関連度に基づいてフィルタリングしている． 従来方式との比較では，網羅性の指標である再現率を51.6%から80.6%，正確性の指標である適合率を76.2%から89.3%，これらのバランス指標であるF値を61.5%から84.7%へ改善した． さらに，言語仕様抽出とスクリプト生成との関係を分析し，生成精度に与える影響と，適切な評価指標の設計指針を示した． |
| （英） | In optical transport networks, the disaggregation of network functions and the increasing adoption of multi-vendor environments have created a demand for unified control mechanisms capable of absorbing differences among devices. To address this challenge, we have developed a controller that accepts control scripts written in an intermediate language, which provides a unified representation of device-specific control commands. Since creating such control scripts requires domain expertise and significant human effort, we are investigating a script-generation support system based on a local large language model (LLM) that can securely handle the proprietary intermediate language. To improve script generation accuracy, it is essential to provide the LLM with complete and accurate specifications of the intermediate language. In this paper, we propose a method for improving the accuracy of language specification extraction. The proposed method enhances the coverage of specification extraction through multiple query generation and query expansion based on retrieval results, while inaccurate information is filtered according to relevance scores. Compared with a conventional method, the proposed method improved recall, a measure of coverage, from 51.6% to 80.6%, precision, a measure of accuracy, from 76.2% to 89.3%, and the F-score, which balances recall and precision, from 61.5% to 84.7%. Furthermore, we analyze the relationship between language specification extraction and script generation, clarify their impact on generation accuracy, and provide guidelines for designing appropriate evaluation metrics. |
|
| キーワード | （和） | 光伝送ネットワーク / 大規模言語モデル（LLM） / 情報検索 / クエリ拡張 / / / / |
| （英） | Optical Transport Network / Large Language Model (LLM) / Information Retrieval / Query Expansion / / / / | |
| 文献情報 | 信学技報, vol. 126, no. 164, NS2026-73, pp. 35-40, 2026年9月. | |
| 資料番号 | NS2026-73 | |
| 発行日 | 2026-08-27 (NS) | |
| ISSN | Online edition: ISSN 2432-6380 | |
| 著作権に ついて |
技術研究報告に掲載された論文の著作権は電子情報通信学会に帰属します．(許諾番号：10GA0019/12GB0052/13GB0056/17GB0034/18GB0034) | |
| PDFダウンロード | NS2026-73 |
|
| 研究会情報 | |
| 研究会 | NS IN CS NV |
| 開催期間 | 2026-09-03 - 2026-09-04 |
| 開催地（和） | 東北大学 電気通信研究所 + オンライン開催 |
| 開催地（英） | Tohoku University + Online |
| テーマ（和） | セッション管理(SIP・IMS)，相互接続技術/標準化，次世代・新世代・将来ネットワーク，クラウド/データセンタネットワーク，SDN(OpenFlow等)・NFV，IPv6，機械学習のネットワーク適用，一般 |
| テーマ（英） | Session management (SIP/IMS), Interoperability/Standardization, NGN/NwGN/Future networks, Cloud/Data center networks, SDN (OpenFlow, etc.)/NFV, IPv6, Machine learning, etc. |
| 講演論文情報の詳細 | |
| 申込み研究会 | NS |
| 会議コード | 2026-09-NS-IN-CS-NV |
| 本文の言語 | 日本語 |
| タイトル（和） | ネットワーク装置制御スクリプト生成のための言語仕様抽出における精度向上手法 |
| サブタイトル（和） | |
| タイトル（英） | A Method for Improving Language Specification Extraction Accuracy for Network Device Control Script Generation |
| サブタイトル（英） | |
| キーワード(1)（和/英） | 光伝送ネットワーク / Optical Transport Network |
| キーワード(2)（和/英） | 大規模言語モデル（LLM） / Large Language Model (LLM) |
| キーワード(3)（和/英） | 情報検索 / Information Retrieval |
| キーワード(4)（和/英） | クエリ拡張 / Query Expansion |
| キーワード(5)（和/英） | / |
| キーワード(6)（和/英） | / |
| キーワード(7)（和/英） | / |
| キーワード(8)（和/英） | / |
| 第1著者 氏名（和/英/ヨミ） | 平野 達弥 / Tatsuya Hirano / ヒラノ タツヤ |
| 第1著者 所属（和/英） | NTT株式会社 (略称： NTT) NTT, Inc. (略称： former NTT) |
| 第2著者 氏名（和/英/ヨミ） | 井上 寛規 / Hiroki Inoue / イノウエ ヒロキ |
| 第2著者 所属（和/英） | NTT株式会社 (略称： NTT) NTT, Inc. (略称： former NTT) |
| 第3著者 氏名（和/英/ヨミ） | 藤原 貴之 / Takayuki Fujiwara / フジワラ タカユキ |
| 第3著者 所属（和/英） | NTT株式会社 (略称： NTT) NTT, Inc. (略称： former NTT) |
| 講演者 | 第1著者 |
| 発表日時 | 2026-09-04 10:10:00 |
| 発表時間 | 25分 |
| 申込先研究会 | NS |
| 資料番号 | NS2026-73 |
| 巻番号（vol） | vol.126 |
| 号番号（no） | no.164 |
| ページ範囲 | pp.35-40 |
| ページ数 | 6 |
| 発行日 | 2026-08-27 (NS) |
[研究会発表申込システムのトップページに戻る]