お知らせ 2023年度・2024年度 学生員 会費割引キャンペーン実施中です
お知らせ 技術研究報告と和文論文誌Cの同時投稿施策(掲載料1割引き)について
お知らせ 電子情報通信学会における研究会開催について
お知らせ NEW 参加費の返金について
電子情報通信学会 研究会発表申込システム
講演論文 詳細
技報閲覧サービス
[ログイン]
技報アーカイブ
 トップに戻る 前のページに戻る   [Japanese] / [English] 

講演抄録/キーワード
講演名 2011-03-03 10:00
光パス設定の公平性を改善する強化学習法の検討
小渕 周橘 拓至奈良先端大)・徐 蘇鋼NICTNS2010-167
抄録 (和) 近年のインターネットトラヒックの急増により,高速大容量伝送を実現する光パス交換の利用が期待されている.
この光パス交換において光パスを動的に設定する場合,伝送ホップ数の違いによって,棄却率に不公平が生じることが知られている.特に分散制御環境では,送受信ノード間の伝送ホップ数が未知であるため,伝送ホップ数に関する公平性を改善することは容易ではない.そこで本稿では,光パス設定の不公平性を改善するために,強化学習とベイズ推定を用いた動的光パス設定法を提案する.提案手法では,光パス設定要求を受けとったノードが経過ホップ数の情報を基にベイズ推定によって伝送ホップ数を予測する.そして予測した伝送ホップ数から,強化学習によって光パス設定要求の受け入れ可否を決定する.この強化学習では,伝送ホップが多い光パス設定を受け入れると多くの報酬を獲得できるため,学習によって公平性の改善が期待できる.提案手法の性能をシミュレーションで評価し,提案手法の効果について調査する. 
(英) In lightpath networks, lightpaths whose number of hops is large are not established easily than those whose number of hops is small. This causes the unfairness of the lightpath establishment in terms of lightpath blocking probability. Especially, in a distributed control environment without a central server, it is not easy to resolve such a unfairness. Therefore, we propose a dynamic lightpath establishment with reinforcement learning and Bayesian estimation so as to improve the fairness. In our proposed method, when a node receives a lightpath establishment request, it estimates the total number of hops between source and destination nodes by using Bayesian estimation. Then, the node accepts or rejects the request from the estimated number of transmission hops by using reinforcement learning. In this reinforcement learning, a node obtains a larger reward for the establishment of a large-hop lightpath. Therefore, it is expected that the fairness can be improved by using the proposed method. We evaluate the performance of our proposed method with simulation, and we investigate the effectiveness of the method.
キーワード (和) 光パス設定 / 強化学習 / Q学習 / ベイズ推定 / 公平性 / / /  
(英) Lightpath establishment / Reinforcement learning / Q-learning / Bayesian estimation / Fairness / / /  
文献情報 信学技報, vol. 110, no. 448, NS2010-167, pp. 25-28, 2011年3月.
資料番号 NS2010-167 
発行日 2011-02-24 (NS) 
ISSN Print edition: ISSN 0913-5685    Online edition: ISSN 2432-6380
著作権に
ついて
技術研究報告に掲載された論文の著作権は電子情報通信学会に帰属します.(許諾番号:10GA0019/12GB0052/13GB0056/17GB0034/18GB0034)
PDFダウンロード NS2010-167

研究会情報
研究会 IN NS  
開催期間 2011-03-03 - 2011-03-04 
開催地(和) 沖縄コンベンションセンター 
開催地(英) Okinawa Convention Center 
テーマ(和) 一般 
テーマ(英) General, NS+IN workshop (March 3-4) 
講演論文情報の詳細
申込み研究会 NS 
会議コード 2011-03-IN-NS 
本文の言語 日本語 
タイトル(和) 光パス設定の公平性を改善する強化学習法の検討 
サブタイトル(和)  
タイトル(英) A Study on Reinforcement Learning for Improving Fairness in Lightpath Networks 
サブタイトル(英)  
キーワード(1)(和/英) 光パス設定 / Lightpath establishment  
キーワード(2)(和/英) 強化学習 / Reinforcement learning  
キーワード(3)(和/英) Q学習 / Q-learning  
キーワード(4)(和/英) ベイズ推定 / Bayesian estimation  
キーワード(5)(和/英) 公平性 / Fairness  
キーワード(6)(和/英) /  
キーワード(7)(和/英) /  
キーワード(8)(和/英) /  
第1著者 氏名(和/英/ヨミ) 小渕 周 / Shu Kobuchi / コブチ シュウ
第1著者 所属(和/英) 奈良先端科学技術大学院大学 (略称: 奈良先端大)
Nara Institute of Science and Technology (略称: NAIST)
第2著者 氏名(和/英/ヨミ) 橘 拓至 / Takuji Tachibana / タチバナ タクジ
第2著者 所属(和/英) 奈良先端科学技術大学院大学 (略称: 奈良先端大)
Nara Institute of Science and Technology (略称: NAIST)
第3著者 氏名(和/英/ヨミ) 徐 蘇鋼 / Sugang Xu / ジョ ソコウ
第3著者 所属(和/英) 情報通信研究機構 (略称: NICT)
National Institute of Information and Communications Technology (略称: NICT)
第4著者 氏名(和/英/ヨミ) / /
第4著者 所属(和/英) (略称: )
(略称: )
第5著者 氏名(和/英/ヨミ) / /
第5著者 所属(和/英) (略称: )
(略称: )
第6著者 氏名(和/英/ヨミ) / /
第6著者 所属(和/英) (略称: )
(略称: )
第7著者 氏名(和/英/ヨミ) / /
第7著者 所属(和/英) (略称: )
(略称: )
第8著者 氏名(和/英/ヨミ) / /
第8著者 所属(和/英) (略称: )
(略称: )
第9著者 氏名(和/英/ヨミ) / /
第9著者 所属(和/英) (略称: )
(略称: )
第10著者 氏名(和/英/ヨミ) / /
第10著者 所属(和/英) (略称: )
(略称: )
第11著者 氏名(和/英/ヨミ) / /
第11著者 所属(和/英) (略称: )
(略称: )
第12著者 氏名(和/英/ヨミ) / /
第12著者 所属(和/英) (略称: )
(略称: )
第13著者 氏名(和/英/ヨミ) / /
第13著者 所属(和/英) (略称: )
(略称: )
第14著者 氏名(和/英/ヨミ) / /
第14著者 所属(和/英) (略称: )
(略称: )
第15著者 氏名(和/英/ヨミ) / /
第15著者 所属(和/英) (略称: )
(略称: )
第16著者 氏名(和/英/ヨミ) / /
第16著者 所属(和/英) (略称: )
(略称: )
第17著者 氏名(和/英/ヨミ) / /
第17著者 所属(和/英) (略称: )
(略称: )
第18著者 氏名(和/英/ヨミ) / /
第18著者 所属(和/英) (略称: )
(略称: )
第19著者 氏名(和/英/ヨミ) / /
第19著者 所属(和/英) (略称: )
(略称: )
第20著者 氏名(和/英/ヨミ) / /
第20著者 所属(和/英) (略称: )
(略称: )
講演者 第1著者 
発表日時 2011-03-03 10:00:00 
発表時間 20分 
申込先研究会 NS 
資料番号 NS2010-167 
巻番号(vol) vol.110 
号番号(no) no.448 
ページ範囲 pp.25-28 
ページ数
発行日 2011-02-24 (NS) 


[研究会発表申込システムのトップページに戻る]

[電子情報通信学会ホームページ]


IEICE / 電子情報通信学会