| 電子情報通信学会 研究会発表申込システム 講演論文 詳細 |
技報閲覧サービス [ログイン] 技報アーカイブ |
| トップに戻る | 前のページに戻る | [Japanese] / [English] |
| 講演抄録／キーワード | ||
| 講演名 | 2024-05-09 13:50 ［奨励講演］ICTシステム設計自動化のためのDouble DQNとNoisy Networkの組み合わせアルゴリズムの改良と評価 ○方違紘之（上智大）・八鍬 豊（NEC）・岡村夏希・シュウ テンシン（上智大）・黒田貴之（NEC）・矢入郁子（上智大）  NS2024-15 |
|
| 抄録 | （和） | 筆者らはこれまで，ICTシステム自動設計のための有効な強化学習アルゴリズムの検討に取り組んできた．本稿は，前回の発表に続いて，Q学習をベースとしたDQNの学習効率を改善する手法であるDouble DQNとGraph Neural Network(GNN) にノイズの層を加えた Noisy Network の組み合わせアルゴリズムについて，その改良と評価の結果を報告するものである．具体的な改良点は，(1) Noisy Networkのノイズのサンプリング方法を標準正規分布から切断正規分布に変更し，標準偏差を0.1，1.0，2.5，5.0の値で評価した点，(2) Double DQN にPrioritized Experience Replay (PER)を追加し，3つの組み合わせアルゴリズムとした点，(3) (2)の組み合わせアルゴリズムを，Noisy Networkのノイズをサンプリングする正規分布の標準偏差を0.1，0.05で比較，さらに切断正規分布に変更して標準偏差を0.1，0.05で比較した点，である．本稿はこれらの改良を通して，ICTシステム設計の状態空間が膨大かつ複雑であるうえに探索による設計プロセスで得られる報酬が疎であるという問題点の解決方法として，強化学習アルゴリズムの組み合わせによって学習効率を改善する方法を提案する． |
| （英） | (Not available yet) | |
| キーワード | （和） | システム設計 / 設計自動化 / 機械学習 / 強化学習 / / / / |
| （英） | / / / / / / / | |
| 文献情報 | 信学技報, vol. 124, no. 14, NS2024-15, pp. 11-16, 2024年5月. | |
| 資料番号 | NS2024-15 | |
| 発行日 | 2024-05-02 (NS) | |
| ISSN | Online edition: ISSN 2432-6380 | |
| 著作権に ついて |
技術研究報告に掲載された論文の著作権は電子情報通信学会に帰属します．(許諾番号：10GA0019/12GB0052/13GB0056/17GB0034/18GB0034) | |
| PDFダウンロード | NS2024-15 |
|
| 研究会情報 | |
| 研究会 | NS |
| 開催期間 | 2024-05-09 - 2024-05-10 |
| 開催地（和） | シンフォニアテクノロジー響ホール伊勢（伊勢市観光文化会館） |
| 開催地（英） | Sinfonia Technology Hibiki Hall Ise |
| テーマ（和） | 高度プロトコル・ネットワーキング技術(IP及び高位レイヤルーチング・フィルタリング，マルチキャスト，品質・経路制御)，IPNWの利用技術(P2P，P4P，オーバレイ，SIP，NGN)，ネットワークシステム関連技術(システム構成法，インタフェース，アーキテクチャ，ハードウェア・ソフトウェア・ミドルウェア)，セキュリティ，ブロックチェーン，一般 |
| テーマ（英） | High level protocol, Networking technologies (IP and high-layer routing/filtering, Multicast, Quality/Routing control), IP network application technologies (P2P, P4P, Overlay, SIP, NGN), Network system related technologies (System configuration, Interface, Architecture, Hardware/Software/Middleware), Security, Blockchain etc. |
| 講演論文情報の詳細 | |
| 申込み研究会 | NS |
| 会議コード | 2024-05-NS |
| 本文の言語 | 日本語 |
| タイトル（和） | ICTシステム設計自動化のためのDouble DQNとNoisy Networkの組み合わせアルゴリズムの改良と評価 |
| サブタイトル（和） | |
| タイトル（英） | Improvement and Evaluation of Combination Algorithm of Double DQN and Noisy Network to Reinforcement Learning for Automation of ICT System Design |
| サブタイトル（英） | |
| キーワード(1)（和/英） | システム設計 / |
| キーワード(2)（和/英） | 設計自動化 / |
| キーワード(3)（和/英） | 機械学習 / |
| キーワード(4)（和/英） | 強化学習 / |
| キーワード(5)（和/英） | / |
| キーワード(6)（和/英） | / |
| キーワード(7)（和/英） | / |
| キーワード(8)（和/英） | / |
| 第1著者 氏名（和/英/ヨミ） | 方違 紘之 / Hiroyuki Hochigai / ホウチガイ ヒロユキ |
| 第1著者 所属（和/英） | 上智大学 (略称： 上智大) Sophia University (略称： Sophia Univ.) |
| 第2著者 氏名（和/英/ヨミ） | 八鍬 豊 / Yutaka Yakuwa / ヤクワ ユタカ |
| 第2著者 所属（和/英） | 日本電気株式会社 (略称： NEC) NEC Corporation (略称： NEC) |
| 第3著者 氏名（和/英/ヨミ） | 岡村 夏希 / Natsuki Okamura / オカムラ ナツキ |
| 第3著者 所属（和/英） | 上智大学 (略称： 上智大) Sophia University (略称： Sophia Univ.) |
| 第4著者 氏名（和/英/ヨミ） | シュウ テンシン / Tianchen Zhou / シュウ テンシン |
| 第4著者 所属（和/英） | 上智大学 (略称： 上智大) Sophia University (略称： Sophia Univ.) |
| 第5著者 氏名（和/英/ヨミ） | 黒田 貴之 / Takayuki Kuroda / クロダ タカユキ |
| 第5著者 所属（和/英） | 日本電気株式会社 (略称： NEC) NEC Corporation (略称： NEC) |
| 第6著者 氏名（和/英/ヨミ） | 矢入 郁子 / Ikuko Eguchi Yairi / ヤイリ イクコ |
| 第6著者 所属（和/英） | 上智大学 (略称： 上智大) Sophia University (略称： Sophia Univ.) |
| 講演者 | 第1著者 |
| 発表日時 | 2024-05-09 13:50:00 |
| 発表時間 | 25分 |
| 申込先研究会 | NS |
| 資料番号 | NS2024-15 |
| 巻番号（vol） | vol.124 |
| 号番号（no） | no.14 |
| ページ範囲 | pp.11-16 |
| ページ数 | 6 |
| 発行日 | 2024-05-02 (NS) |
[研究会発表申込システムのトップページに戻る]