| 講演抄録/キーワード |
| 講演名 |
2022-12-22 16:35
ICTシステム自動設計における学習効率化のためのNoisyNetsの適用と評価 ○シユウ テンシン(上智大)・八鍬 豊(NEC)・岡村夏希(上智大)・黒田貴之(NEC)・矢入郁子(上智大) IBISML2022-50 |
| 抄録 |
(和) |
本稿では,ICTシステムの設計における強化学習の手法を紹介する.ICTシステムの設計の状態空間は複雑であり,設計プロセスで得られる報酬も疎であるため強化学習が難しい.そこで,Weaverと呼ばれるICTシステムの自動設計技術に,Noisy Netsという強化学習の手法を適用し評価を行った.Noisy Netsはニューラルネットワークの構造にノイズ層を追加することで探索を制御する手法であり,ノイズ層で与えられたパラメトリックノイズはネットワークの重みの勾配降下を通して学習される.その適用により,ニューラルネットワークによる過大評価が抑制され,探索の効率化が実現できる.結果として,提案したアルゴリズムを Weaver に適用することで,学習効率化の効果が確認された. |
| (英) |
This paper introduces a reinforcement learning method for the ICT system design process. Since the state space of the designing process is complex and rewards obtained in the design process are significantly sparse. The proposed method to apply an additional noisy layer to the structure of the graph neural network for reinforcement learning in an automated design technology for ICT systems called Weaver. The parametric noise applied to the network are learned with gradient descent along with the remaining network weights. This helps to reduce harmful overestimation from the network and aids the efficiency of exploration for Weaver. The evaluation result showed that using the proposed algorithm for Weaver could shorten the time to learn the design of ICT systems. |
| キーワード |
(和) |
システム設計 / 設計自動化 / 機械学習 / 強化学習 / / / / |
| (英) |
System Design / Design Automation / Machine Learning / Reinforcement Learning / / / / |
| 文献情報 |
信学技報, vol. 122, no. 325, IBISML2022-50, pp. 46-53, 2022年12月. |
| 資料番号 |
IBISML2022-50 |
| 発行日 |
2022-12-15 (IBISML) |
| ISSN |
Online edition: ISSN 2432-6380 |
著作権に ついて |
技術研究報告に掲載された論文の著作権は電子情報通信学会に帰属します.(許諾番号:10GA0019/12GB0052/13GB0056/17GB0034/18GB0034) |
| PDFダウンロード |
IBISML2022-50 |
| 研究会情報 |
| 研究会 |
IBISML |
| 開催期間 |
2022-12-22 - 2022-12-23 |
| 開催地(和) |
京都大学 |
| 開催地(英) |
Kyoto University |
| テーマ(和) |
機械学習一般 |
| テーマ(英) |
Machine Learning, etc. |
| 講演論文情報の詳細 |
| 申込み研究会 |
IBISML |
| 会議コード |
2022-12-IBISML |
| 本文の言語 |
日本語 |
| タイトル(和) |
ICTシステム自動設計における学習効率化のためのNoisyNetsの適用と評価 |
| サブタイトル(和) |
|
| タイトル(英) |
Implementation and evaluation of Noisy Nets to Reinforcement learning of Automated Designing ICT System |
| サブタイトル(英) |
|
| キーワード(1)(和/英) |
システム設計 / System Design |
| キーワード(2)(和/英) |
設計自動化 / Design Automation |
| キーワード(3)(和/英) |
機械学習 / Machine Learning |
| キーワード(4)(和/英) |
強化学習 / Reinforcement Learning |
| キーワード(5)(和/英) |
/ |
| キーワード(6)(和/英) |
/ |
| キーワード(7)(和/英) |
/ |
| キーワード(8)(和/英) |
/ |
| 第1著者 氏名(和/英/ヨミ) |
シユウ テンシン / Tianchen Zhou / シユウ テンシン |
| 第1著者 所属(和/英) |
上智大学 (略称: 上智大)
Sophia University (略称: Sophia Univ.) |
| 第2著者 氏名(和/英/ヨミ) |
八鍬 豊 / Yutaka Yakuwa / ヤクワ ユタカ |
| 第2著者 所属(和/英) |
日本電気株式会社 NEC Corporation (略称: NEC)
NEC Corporation (略称: NEC) |
| 第3著者 氏名(和/英/ヨミ) |
岡村 夏希 / Natsuki Okamura / オカムラ ナツキ |
| 第3著者 所属(和/英) |
上智大学 (略称: 上智大)
Sophia University (略称: Sophia Univ.) |
| 第4著者 氏名(和/英/ヨミ) |
黒田 貴之 / Takayuki Kuroda / クロダ タカユキ |
| 第4著者 所属(和/英) |
日本電気株式会社 (略称: NEC)
NEC Corporation (略称: NEC) |
| 第5著者 氏名(和/英/ヨミ) |
矢入 郁子 / Ikuko E. Yairi / ヤイリ イクコ |
| 第5著者 所属(和/英) |
上智大学 (略称: 上智大)
Sophia University (略称: Sophia Univ.) |
| 第6著者 氏名(和/英/ヨミ) |
/ / |
| 第6著者 所属(和/英) |
(略称: )
(略称: ) |
| 第7著者 氏名(和/英/ヨミ) |
/ / |
| 第7著者 所属(和/英) |
(略称: )
(略称: ) |
| 第8著者 氏名(和/英/ヨミ) |
/ / |
| 第8著者 所属(和/英) |
(略称: )
(略称: ) |
| 第9著者 氏名(和/英/ヨミ) |
/ / |
| 第9著者 所属(和/英) |
(略称: )
(略称: ) |
| 第10著者 氏名(和/英/ヨミ) |
/ / |
| 第10著者 所属(和/英) |
(略称: )
(略称: ) |
| 第11著者 氏名(和/英/ヨミ) |
/ / |
| 第11著者 所属(和/英) |
(略称: )
(略称: ) |
| 第12著者 氏名(和/英/ヨミ) |
/ / |
| 第12著者 所属(和/英) |
(略称: )
(略称: ) |
| 第13著者 氏名(和/英/ヨミ) |
/ / |
| 第13著者 所属(和/英) |
(略称: )
(略称: ) |
| 第14著者 氏名(和/英/ヨミ) |
/ / |
| 第14著者 所属(和/英) |
(略称: )
(略称: ) |
| 第15著者 氏名(和/英/ヨミ) |
/ / |
| 第15著者 所属(和/英) |
(略称: )
(略称: ) |
| 第16著者 氏名(和/英/ヨミ) |
/ / |
| 第16著者 所属(和/英) |
(略称: )
(略称: ) |
| 第17著者 氏名(和/英/ヨミ) |
/ / |
| 第17著者 所属(和/英) |
(略称: )
(略称: ) |
| 第18著者 氏名(和/英/ヨミ) |
/ / |
| 第18著者 所属(和/英) |
(略称: )
(略称: ) |
| 第19著者 氏名(和/英/ヨミ) |
/ / |
| 第19著者 所属(和/英) |
(略称: )
(略称: ) |
| 第20著者 氏名(和/英/ヨミ) |
/ / |
| 第20著者 所属(和/英) |
(略称: )
(略称: ) |
| 第21著者 氏名(和/英/ヨミ) |
/ / |
| 第21著者 所属(和/英) |
(略称: )
(略称: ) |
| 第22著者 氏名(和/英/ヨミ) |
/ / |
| 第22著者 所属(和/英) |
(略称: )
(略称: ) |
| 第23著者 氏名(和/英/ヨミ) |
/ / |
| 第23著者 所属(和/英) |
(略称: )
(略称: ) |
| 第24著者 氏名(和/英/ヨミ) |
/ / |
| 第24著者 所属(和/英) |
(略称: )
(略称: ) |
| 第25著者 氏名(和/英/ヨミ) |
/ / |
| 第25著者 所属(和/英) |
(略称: )
(略称: ) |
| 第26著者 氏名(和/英/ヨミ) |
/ / |
| 第26著者 所属(和/英) |
(略称: )
(略称: ) |
| 第27著者 氏名(和/英/ヨミ) |
/ / |
| 第27著者 所属(和/英) |
(略称: )
(略称: ) |
| 第28著者 氏名(和/英/ヨミ) |
/ / |
| 第28著者 所属(和/英) |
(略称: )
(略称: ) |
| 第29著者 氏名(和/英/ヨミ) |
/ / |
| 第29著者 所属(和/英) |
(略称: )
(略称: ) |
| 第30著者 氏名(和/英/ヨミ) |
/ / |
| 第30著者 所属(和/英) |
(略称: )
(略称: ) |
| 第31著者 氏名(和/英/ヨミ) |
/ / |
| 第31著者 所属(和/英) |
(略称: )
(略称: ) |
| 第32著者 氏名(和/英/ヨミ) |
/ / |
| 第32著者 所属(和/英) |
(略称: )
(略称: ) |
| 第33著者 氏名(和/英/ヨミ) |
/ / |
| 第33著者 所属(和/英) |
(略称: )
(略称: ) |
| 第34著者 氏名(和/英/ヨミ) |
/ / |
| 第34著者 所属(和/英) |
(略称: )
(略称: ) |
| 第35著者 氏名(和/英/ヨミ) |
/ / |
| 第35著者 所属(和/英) |
(略称: )
(略称: ) |
| 第36著者 氏名(和/英/ヨミ) |
/ / |
| 第36著者 所属(和/英) |
(略称: )
(略称: ) |
| 講演者 |
第1著者 |
| 発表日時 |
2022-12-22 16:35:00 |
| 発表時間 |
20分 |
| 申込先研究会 |
IBISML |
| 資料番号 |
IBISML2022-50 |
| 巻番号(vol) |
vol.122 |
| 号番号(no) |
no.325 |
| ページ範囲 |
pp.46-53 |
| ページ数 |
8 |
| 発行日 |
2022-12-15 (IBISML) |