| 電子情報通信学会 研究会発表申込システム 講演論文 詳細 |
技報閲覧サービス [ログイン] 技報アーカイブ |
| トップに戻る | 前のページに戻る | [Japanese] / [English] |
| 講演抄録／キーワード | ||
| 講演名 | 2024-08-09 09:50 経験キャッシュを用いたエッジクラウド環境における分散強化学習の高速化 ○小鹿友裕・久田松彪晟（富山県立大）・松谷宏紀（慶大）・森島 信（富山県立大）  CPSY2024-28 DC2024-28 RECONF2024-28 |
|
| 抄録 | （和） | 分散強化学習はロボット制御等への応用が期待されている。そのような応用では、経験を生成するActorがエッジ、学習を行うLearnerがクラウドとなるエッジクラウド環境が想定され、ActorノードとLearnerノード間の通信オーバーヘッドが問題となる。エッジクラウド環境では、ActorノードとLearnerノードに加えて、Actorが生成した経験を集約してLearnerへ送信するBufferノードを追加する構成が一般的であり、その構成においてBufferノードにリプレイメモリを設ける構成が提案されている。本論文では、この構成にさらにLearnerノード内に一度利用した経験をキャッシュする経験キャッシュを設けることで、複数回利用する経験の再送信を削減し、分散強化学習の通信オーバーヘッドを削減する手法を提案する。エッジクラウド環境を想定して、BufferノードとLearnerノード間を25GbEのスイッチと10kmの光ファイバーを介して接続した環境において評価した結果、通信量を27.3%削減し、スループットを8.7%向上させることに成功した。 |
| （英） | (Not available yet) | |
| キーワード | （和） | 分散強化学習 / エッジクラウドコンピューティング / Deep Q-Network / / / / / |
| （英） | Distributed Reinforcement Learning / Edge-cloud Computing / Deep Q-Network / / / / / | |
| 文献情報 | 信学技報, vol. 124, no. 148, CPSY2024-28, pp. 63-68, 2024年8月. | |
| 資料番号 | CPSY2024-28 | |
| 発行日 | 2024-07-31 (CPSY, DC, RECONF) | |
| ISSN | Online edition: ISSN 2432-6380 | |
| 著作権に ついて |
技術研究報告に掲載された論文の著作権は電子情報通信学会に帰属します．(許諾番号：10GA0019/12GB0052/13GB0056/17GB0034/18GB0034) | |
| PDFダウンロード | CPSY2024-28 DC2024-28 RECONF2024-28 |
|
| 研究会情報 | |
| 研究会 | CPSY DC RECONF IPSJ-ARC |
| 開催期間 | 2024-08-07 - 2024-08-09 |
| 開催地（和） | あわぎんホール |
| 開催地（英） | Awagin Hall |
| テーマ（和） | SWoPP2024: 並列／分散／協調システムとディペンダブルコンピューティングおよび一般 |
| テーマ（英） | SWoPP2024: Parallel, Distributed and Cooperative Processing Systems and Dependable Computing |
| 講演論文情報の詳細 | |
| 申込み研究会 | CPSY |
| 会議コード | 2024-08-CPSY-DC-RECONF-ARC |
| 本文の言語 | 日本語 |
| タイトル（和） | 経験キャッシュを用いたエッジクラウド環境における分散強化学習の高速化 |
| サブタイトル（和） | |
| タイトル（英） | An Acceleration Method for Distributed Reinforcement Learning in Edge-Cloud Environments Using Experience Cache |
| サブタイトル（英） | |
| キーワード(1)（和/英） | 分散強化学習 / Distributed Reinforcement Learning |
| キーワード(2)（和/英） | エッジクラウドコンピューティング / Edge-cloud Computing |
| キーワード(3)（和/英） | Deep Q-Network / Deep Q-Network |
| キーワード(4)（和/英） | / |
| キーワード(5)（和/英） | / |
| キーワード(6)（和/英） | / |
| キーワード(7)（和/英） | / |
| キーワード(8)（和/英） | / |
| 第1著者 氏名（和/英/ヨミ） | 小鹿 友裕 / Tomohiro Ojika / オジカ トモヒロ |
| 第1著者 所属（和/英） | 富山県立大学 (略称： 富山県立大) Toyama Prefectural University (略称： Toyama Prefectural Univ.) |
| 第2著者 氏名（和/英/ヨミ） | 久田松 彪晟 / Kousei Kudatatsu / クダマツ コウセイ |
| 第2著者 所属（和/英） | 富山県立大学 (略称： 富山県立大) Toyama Prefectural University (略称： Toyama Prefectural Univ.) |
| 第3著者 氏名（和/英/ヨミ） | 松谷 宏紀 / Hiroki Matsutani / マツタニ ヒロキ |
| 第3著者 所属（和/英） | 慶應義塾大学 (略称： 慶大) Keio University (略称： Keio Univ.) |
| 第4著者 氏名（和/英/ヨミ） | 森島 信 / Shin Morishima / モリシマ シン |
| 第4著者 所属（和/英） | 富山県立大学 (略称： 富山県立大) Toyama Prefectural University (略称： Toyama Prefectural Univ.) |
| 講演者 | 第1著者 |
| 発表日時 | 2024-08-09 09:50:00 |
| 発表時間 | 25分 |
| 申込先研究会 | CPSY |
| 資料番号 | CPSY2024-28, DC2024-28, RECONF2024-28 |
| 巻番号（vol） | vol.124 |
| 号番号（no） | no.148(CPSY), no.149(DC), no.150(RECONF) |
| ページ範囲 | pp.63-68 |
| ページ数 | 6 |
| 発行日 | 2024-07-31 (CPSY, DC, RECONF) |
[研究会発表申込システムのトップページに戻る]