| 講演抄録/キーワード |
| 講演名 |
2011-03-03 10:00
光パス設定の公平性を改善する強化学習法の検討 ○小渕 周・橘 拓至(奈良先端大)・徐 蘇鋼(NICT) NS2010-167 |
| 抄録 |
(和) |
近年のインターネットトラヒックの急増により,高速大容量伝送を実現する光パス交換の利用が期待されている.
この光パス交換において光パスを動的に設定する場合,伝送ホップ数の違いによって,棄却率に不公平が生じることが知られている.特に分散制御環境では,送受信ノード間の伝送ホップ数が未知であるため,伝送ホップ数に関する公平性を改善することは容易ではない.そこで本稿では,光パス設定の不公平性を改善するために,強化学習とベイズ推定を用いた動的光パス設定法を提案する.提案手法では,光パス設定要求を受けとったノードが経過ホップ数の情報を基にベイズ推定によって伝送ホップ数を予測する.そして予測した伝送ホップ数から,強化学習によって光パス設定要求の受け入れ可否を決定する.この強化学習では,伝送ホップが多い光パス設定を受け入れると多くの報酬を獲得できるため,学習によって公平性の改善が期待できる.提案手法の性能をシミュレーションで評価し,提案手法の効果について調査する. |
| (英) |
In lightpath networks, lightpaths whose number of hops is large are not established easily than those whose number of hops is small. This causes the unfairness of the lightpath establishment in terms of lightpath blocking probability. Especially, in a distributed control environment without a central server, it is not easy to resolve such a unfairness. Therefore, we propose a dynamic lightpath establishment with reinforcement learning and Bayesian estimation so as to improve the fairness. In our proposed method, when a node receives a lightpath establishment request, it estimates the total number of hops between source and destination nodes by using Bayesian estimation. Then, the node accepts or rejects the request from the estimated number of transmission hops by using reinforcement learning. In this reinforcement learning, a node obtains a larger reward for the establishment of a large-hop lightpath. Therefore, it is expected that the fairness can be improved by using the proposed method. We evaluate the performance of our proposed method with simulation, and we investigate the effectiveness of the method. |
| キーワード |
(和) |
光パス設定 / 強化学習 / Q学習 / ベイズ推定 / 公平性 / / / |
| (英) |
Lightpath establishment / Reinforcement learning / Q-learning / Bayesian estimation / Fairness / / / |
| 文献情報 |
信学技報, vol. 110, no. 448, NS2010-167, pp. 25-28, 2011年3月. |
| 資料番号 |
NS2010-167 |
| 発行日 |
2011-02-24 (NS) |
| ISSN |
Print edition: ISSN 0913-5685 Online edition: ISSN 2432-6380 |
著作権に ついて |
技術研究報告に掲載された論文の著作権は電子情報通信学会に帰属します.(許諾番号:10GA0019/12GB0052/13GB0056/17GB0034/18GB0034) |
| PDFダウンロード |
NS2010-167 |
| 研究会情報 |
| 研究会 |
IN NS |
| 開催期間 |
2011-03-03 - 2011-03-04 |
| 開催地(和) |
沖縄コンベンションセンター |
| 開催地(英) |
Okinawa Convention Center |
| テーマ(和) |
一般 |
| テーマ(英) |
General, NS+IN workshop (March 3-4) |
| 講演論文情報の詳細 |
| 申込み研究会 |
NS |
| 会議コード |
2011-03-IN-NS |
| 本文の言語 |
日本語 |
| タイトル(和) |
光パス設定の公平性を改善する強化学習法の検討 |
| サブタイトル(和) |
|
| タイトル(英) |
A Study on Reinforcement Learning for Improving Fairness in Lightpath Networks |
| サブタイトル(英) |
|
| キーワード(1)(和/英) |
光パス設定 / Lightpath establishment |
| キーワード(2)(和/英) |
強化学習 / Reinforcement learning |
| キーワード(3)(和/英) |
Q学習 / Q-learning |
| キーワード(4)(和/英) |
ベイズ推定 / Bayesian estimation |
| キーワード(5)(和/英) |
公平性 / Fairness |
| キーワード(6)(和/英) |
/ |
| キーワード(7)(和/英) |
/ |
| キーワード(8)(和/英) |
/ |
| 第1著者 氏名(和/英/ヨミ) |
小渕 周 / Shu Kobuchi / コブチ シュウ |
| 第1著者 所属(和/英) |
奈良先端科学技術大学院大学 (略称: 奈良先端大)
Nara Institute of Science and Technology (略称: NAIST) |
| 第2著者 氏名(和/英/ヨミ) |
橘 拓至 / Takuji Tachibana / タチバナ タクジ |
| 第2著者 所属(和/英) |
奈良先端科学技術大学院大学 (略称: 奈良先端大)
Nara Institute of Science and Technology (略称: NAIST) |
| 第3著者 氏名(和/英/ヨミ) |
徐 蘇鋼 / Sugang Xu / ジョ ソコウ |
| 第3著者 所属(和/英) |
情報通信研究機構 (略称: NICT)
National Institute of Information and Communications Technology (略称: NICT) |
| 第4著者 氏名(和/英/ヨミ) |
/ / |
| 第4著者 所属(和/英) |
(略称: )
(略称: ) |
| 第5著者 氏名(和/英/ヨミ) |
/ / |
| 第5著者 所属(和/英) |
(略称: )
(略称: ) |
| 第6著者 氏名(和/英/ヨミ) |
/ / |
| 第6著者 所属(和/英) |
(略称: )
(略称: ) |
| 第7著者 氏名(和/英/ヨミ) |
/ / |
| 第7著者 所属(和/英) |
(略称: )
(略称: ) |
| 第8著者 氏名(和/英/ヨミ) |
/ / |
| 第8著者 所属(和/英) |
(略称: )
(略称: ) |
| 第9著者 氏名(和/英/ヨミ) |
/ / |
| 第9著者 所属(和/英) |
(略称: )
(略称: ) |
| 第10著者 氏名(和/英/ヨミ) |
/ / |
| 第10著者 所属(和/英) |
(略称: )
(略称: ) |
| 第11著者 氏名(和/英/ヨミ) |
/ / |
| 第11著者 所属(和/英) |
(略称: )
(略称: ) |
| 第12著者 氏名(和/英/ヨミ) |
/ / |
| 第12著者 所属(和/英) |
(略称: )
(略称: ) |
| 第13著者 氏名(和/英/ヨミ) |
/ / |
| 第13著者 所属(和/英) |
(略称: )
(略称: ) |
| 第14著者 氏名(和/英/ヨミ) |
/ / |
| 第14著者 所属(和/英) |
(略称: )
(略称: ) |
| 第15著者 氏名(和/英/ヨミ) |
/ / |
| 第15著者 所属(和/英) |
(略称: )
(略称: ) |
| 第16著者 氏名(和/英/ヨミ) |
/ / |
| 第16著者 所属(和/英) |
(略称: )
(略称: ) |
| 第17著者 氏名(和/英/ヨミ) |
/ / |
| 第17著者 所属(和/英) |
(略称: )
(略称: ) |
| 第18著者 氏名(和/英/ヨミ) |
/ / |
| 第18著者 所属(和/英) |
(略称: )
(略称: ) |
| 第19著者 氏名(和/英/ヨミ) |
/ / |
| 第19著者 所属(和/英) |
(略称: )
(略称: ) |
| 第20著者 氏名(和/英/ヨミ) |
/ / |
| 第20著者 所属(和/英) |
(略称: )
(略称: ) |
| 第21著者 氏名(和/英/ヨミ) |
/ / |
| 第21著者 所属(和/英) |
(略称: )
(略称: ) |
| 第22著者 氏名(和/英/ヨミ) |
/ / |
| 第22著者 所属(和/英) |
(略称: )
(略称: ) |
| 第23著者 氏名(和/英/ヨミ) |
/ / |
| 第23著者 所属(和/英) |
(略称: )
(略称: ) |
| 第24著者 氏名(和/英/ヨミ) |
/ / |
| 第24著者 所属(和/英) |
(略称: )
(略称: ) |
| 第25著者 氏名(和/英/ヨミ) |
/ / |
| 第25著者 所属(和/英) |
(略称: )
(略称: ) |
| 第26著者 氏名(和/英/ヨミ) |
/ / |
| 第26著者 所属(和/英) |
(略称: )
(略称: ) |
| 第27著者 氏名(和/英/ヨミ) |
/ / |
| 第27著者 所属(和/英) |
(略称: )
(略称: ) |
| 第28著者 氏名(和/英/ヨミ) |
/ / |
| 第28著者 所属(和/英) |
(略称: )
(略称: ) |
| 第29著者 氏名(和/英/ヨミ) |
/ / |
| 第29著者 所属(和/英) |
(略称: )
(略称: ) |
| 第30著者 氏名(和/英/ヨミ) |
/ / |
| 第30著者 所属(和/英) |
(略称: )
(略称: ) |
| 第31著者 氏名(和/英/ヨミ) |
/ / |
| 第31著者 所属(和/英) |
(略称: )
(略称: ) |
| 第32著者 氏名(和/英/ヨミ) |
/ / |
| 第32著者 所属(和/英) |
(略称: )
(略称: ) |
| 第33著者 氏名(和/英/ヨミ) |
/ / |
| 第33著者 所属(和/英) |
(略称: )
(略称: ) |
| 第34著者 氏名(和/英/ヨミ) |
/ / |
| 第34著者 所属(和/英) |
(略称: )
(略称: ) |
| 第35著者 氏名(和/英/ヨミ) |
/ / |
| 第35著者 所属(和/英) |
(略称: )
(略称: ) |
| 第36著者 氏名(和/英/ヨミ) |
/ / |
| 第36著者 所属(和/英) |
(略称: )
(略称: ) |
| 講演者 |
第1著者 |
| 発表日時 |
2011-03-03 10:00:00 |
| 発表時間 |
20分 |
| 申込先研究会 |
NS |
| 資料番号 |
NS2010-167 |
| 巻番号(vol) |
vol.110 |
| 号番号(no) |
no.448 |
| ページ範囲 |
pp.25-28 |
| ページ数 |
4 |
| 発行日 |
2011-02-24 (NS) |