| 講演抄録/キーワード |
| 講演名 |
2026-03-17 11:15
エッジクラウド環境の分散強化学習におけるエッジでのファインチューニングの評価 ○浅名舜介(富山県立大)・松谷宏紀(慶大)・森島 信(富山県立大) CPSY2025-75 DC2025-147 |
| 抄録 |
(和) |
分散強化学習はロボット制御等への応用が期待されている。
そのような応用では、経験を生成するActorがエッジ、学習を行うLearnerがクラウドとなるエッジクラウド環境が想定され、ActorノードとLearnerノード間の通信オーバーヘッドが問題となる。
本論文では、Learnerノードによる学習が一定程度進行した後に、Actorノードのみの学習に切り替え、LoRAによるファインチューニングを行う手法を提案する。
その初期検討として、LoRAを用いた学習により、学習切り替え時点よりも良い方策が得られるかどうかを検証し、ファインチューニングの有効性を評価した。
LoRAの適用方針として、全ての層を追加学習するLoRA-All、CNN層を学習するLoRA-CNN、全結合層を学習するLoRA-Linearの3手法を比較した。
学習の切り替え時点を変えた評価を行い、切り替えが早い場合にはLoRA-CNN、遅い場合にはLoRA-Linearが最もスコア向上率が高く、それぞれ切り替え時点の1.43倍、1.31倍のスコアを達成した。
これらの結果から、LoRAによる追加学習を学習段階に応じて適切な層に実施することでより良い方策を得られ、Actorノードによるファインチューニングは有効であると言える。 |
| (英) |
(Not available yet) |
| キーワード |
(和) |
分散強化学習 / エッジクラウドコンピューティング / Deep Q-Network / LoRA / / / / |
| (英) |
Distributed Reinforcement Learning / Edge-cloud Computing / Deep Q-Network / LoRA / / / / |
| 文献情報 |
信学技報, vol. 125, no. 401, CPSY2025-75, pp. 137-142, 2026年3月. |
| 資料番号 |
CPSY2025-75 |
| 発行日 |
2026-03-08 (CPSY, DC) |
| ISSN |
Online edition: ISSN 2432-6380 |
著作権に ついて |
技術研究報告に掲載された論文の著作権は電子情報通信学会に帰属します.(許諾番号:10GA0019/12GB0052/13GB0056/17GB0034/18GB0034) |
| PDFダウンロード |
CPSY2025-75 DC2025-147 |
| 研究会情報 |
| 研究会 |
DC CPSY IPSJ-SLDM IPSJ-EMB IPSJ-ARC |
| 開催期間 |
2026-03-15 - 2026-03-17 |
| 開催地(和) |
サン・オリーブ オリーブホール |
| 開催地(英) |
Sun-Olive Olive Hall |
| テーマ(和) |
組込み技術とネットワークに関するワークショップ ETNET2026 |
| テーマ(英) |
ETNET2026 |
| 講演論文情報の詳細 |
| 申込み研究会 |
CPSY |
| 会議コード |
2026-03-DC-CPSY-SLDM-EMB-ARC |
| 本文の言語 |
日本語 |
| タイトル(和) |
エッジクラウド環境の分散強化学習におけるエッジでのファインチューニングの評価 |
| サブタイトル(和) |
|
| タイトル(英) |
Evaluation of Edge-Side Fine-Tuning in Distributed Reinforcement Learning for Edge-Cloud Environments |
| サブタイトル(英) |
|
| キーワード(1)(和/英) |
分散強化学習 / Distributed Reinforcement Learning |
| キーワード(2)(和/英) |
エッジクラウドコンピューティング / Edge-cloud Computing |
| キーワード(3)(和/英) |
Deep Q-Network / Deep Q-Network |
| キーワード(4)(和/英) |
LoRA / LoRA |
| キーワード(5)(和/英) |
/ |
| キーワード(6)(和/英) |
/ |
| キーワード(7)(和/英) |
/ |
| キーワード(8)(和/英) |
/ |
| 第1著者 氏名(和/英/ヨミ) |
浅名 舜介 / Shunsuke Asana / アサナ シュンスケ |
| 第1著者 所属(和/英) |
富山県立大学 (略称: 富山県立大)
Toyama Prefectural University (略称: Toyama Prefectural Univ.) |
| 第2著者 氏名(和/英/ヨミ) |
松谷 宏紀 / Hiroki Matsutani / マツタニ ヒロキ |
| 第2著者 所属(和/英) |
慶応義塾大学 (略称: 慶大)
Keio University (略称: Keio Univ.) |
| 第3著者 氏名(和/英/ヨミ) |
森島 信 / Shin Morishima / モリシマ シン |
| 第3著者 所属(和/英) |
富山県立大学 (略称: 富山県立大)
Toyama Prefectural University (略称: Toyama Prefectural Univ.) |
| 第4著者 氏名(和/英/ヨミ) |
/ / |
| 第4著者 所属(和/英) |
(略称: )
(略称: ) |
| 第5著者 氏名(和/英/ヨミ) |
/ / |
| 第5著者 所属(和/英) |
(略称: )
(略称: ) |
| 第6著者 氏名(和/英/ヨミ) |
/ / |
| 第6著者 所属(和/英) |
(略称: )
(略称: ) |
| 第7著者 氏名(和/英/ヨミ) |
/ / |
| 第7著者 所属(和/英) |
(略称: )
(略称: ) |
| 第8著者 氏名(和/英/ヨミ) |
/ / |
| 第8著者 所属(和/英) |
(略称: )
(略称: ) |
| 第9著者 氏名(和/英/ヨミ) |
/ / |
| 第9著者 所属(和/英) |
(略称: )
(略称: ) |
| 第10著者 氏名(和/英/ヨミ) |
/ / |
| 第10著者 所属(和/英) |
(略称: )
(略称: ) |
| 第11著者 氏名(和/英/ヨミ) |
/ / |
| 第11著者 所属(和/英) |
(略称: )
(略称: ) |
| 第12著者 氏名(和/英/ヨミ) |
/ / |
| 第12著者 所属(和/英) |
(略称: )
(略称: ) |
| 第13著者 氏名(和/英/ヨミ) |
/ / |
| 第13著者 所属(和/英) |
(略称: )
(略称: ) |
| 第14著者 氏名(和/英/ヨミ) |
/ / |
| 第14著者 所属(和/英) |
(略称: )
(略称: ) |
| 第15著者 氏名(和/英/ヨミ) |
/ / |
| 第15著者 所属(和/英) |
(略称: )
(略称: ) |
| 第16著者 氏名(和/英/ヨミ) |
/ / |
| 第16著者 所属(和/英) |
(略称: )
(略称: ) |
| 第17著者 氏名(和/英/ヨミ) |
/ / |
| 第17著者 所属(和/英) |
(略称: )
(略称: ) |
| 第18著者 氏名(和/英/ヨミ) |
/ / |
| 第18著者 所属(和/英) |
(略称: )
(略称: ) |
| 第19著者 氏名(和/英/ヨミ) |
/ / |
| 第19著者 所属(和/英) |
(略称: )
(略称: ) |
| 第20著者 氏名(和/英/ヨミ) |
/ / |
| 第20著者 所属(和/英) |
(略称: )
(略称: ) |
| 第21著者 氏名(和/英/ヨミ) |
/ / |
| 第21著者 所属(和/英) |
(略称: )
(略称: ) |
| 第22著者 氏名(和/英/ヨミ) |
/ / |
| 第22著者 所属(和/英) |
(略称: )
(略称: ) |
| 第23著者 氏名(和/英/ヨミ) |
/ / |
| 第23著者 所属(和/英) |
(略称: )
(略称: ) |
| 第24著者 氏名(和/英/ヨミ) |
/ / |
| 第24著者 所属(和/英) |
(略称: )
(略称: ) |
| 第25著者 氏名(和/英/ヨミ) |
/ / |
| 第25著者 所属(和/英) |
(略称: )
(略称: ) |
| 第26著者 氏名(和/英/ヨミ) |
/ / |
| 第26著者 所属(和/英) |
(略称: )
(略称: ) |
| 第27著者 氏名(和/英/ヨミ) |
/ / |
| 第27著者 所属(和/英) |
(略称: )
(略称: ) |
| 第28著者 氏名(和/英/ヨミ) |
/ / |
| 第28著者 所属(和/英) |
(略称: )
(略称: ) |
| 第29著者 氏名(和/英/ヨミ) |
/ / |
| 第29著者 所属(和/英) |
(略称: )
(略称: ) |
| 第30著者 氏名(和/英/ヨミ) |
/ / |
| 第30著者 所属(和/英) |
(略称: )
(略称: ) |
| 第31著者 氏名(和/英/ヨミ) |
/ / |
| 第31著者 所属(和/英) |
(略称: )
(略称: ) |
| 第32著者 氏名(和/英/ヨミ) |
/ / |
| 第32著者 所属(和/英) |
(略称: )
(略称: ) |
| 第33著者 氏名(和/英/ヨミ) |
/ / |
| 第33著者 所属(和/英) |
(略称: )
(略称: ) |
| 第34著者 氏名(和/英/ヨミ) |
/ / |
| 第34著者 所属(和/英) |
(略称: )
(略称: ) |
| 第35著者 氏名(和/英/ヨミ) |
/ / |
| 第35著者 所属(和/英) |
(略称: )
(略称: ) |
| 第36著者 氏名(和/英/ヨミ) |
/ / |
| 第36著者 所属(和/英) |
(略称: )
(略称: ) |
| 講演者 |
第1著者 |
| 発表日時 |
2026-03-17 11:15:00 |
| 発表時間 |
20分 |
| 申込先研究会 |
CPSY |
| 資料番号 |
CPSY2025-75, DC2025-147 |
| 巻番号(vol) |
vol.125 |
| 号番号(no) |
no.401(CPSY), no.402(DC) |
| ページ範囲 |
pp.137-142 |
| ページ数 |
6 |
| 発行日 |
2026-03-08 (CPSY, DC) |