| 電子情報通信学会 研究会発表申込システム 講演論文 詳細 |
技報閲覧サービス [ログイン] 技報アーカイブ |
| トップに戻る | 前のページに戻る | [Japanese] / [English] |
| 講演抄録／キーワード | ||
| 講演名 | 2011-03-08 11:05 RBFネットワークのベイズ推測における特異点近傍での汎化誤差について ○幸島匡宏・渡辺澄夫（東工大）  NC2010-168 |
|
| 抄録 | （和） | 神経回路網のように階層的な構造を持つ学習システムでは、パラメータと確率分布が一対一に対応せず、フィッシャー情報行列が正則でないために、統計的正則モデルの漸近理論が成り立たない。近年の学習理論の発展により、真の分布が学習モデルの特異点であるか、あるいは特異点から十分に離れている場合には、汎化誤差の挙動が理論的に解明されているが、真の分布が特異点の近傍にある場合に、特異点からどのような影響を受けるかについては、入力の次元に応じて挙動が変化することが知られている。本論文では、特異モデルの代表的な例であるRBFネットワークについて、特異点の近傍での学習がどのような性質を持つかを実験的に解析し、入力が一次元の時に次の現象が起こることを明かにする。(1) 真の分布が特異点から離れるに従って少しずつ汎化誤差は大きくなる。(2) 真の分布が特異点からさらに離れると汎化誤差は小さくなる。 |
| （英） | In a learning system which has hierarchical structure, neither the map from the parameter to the probability distribution is one-to-one, nor Fisher information matrix is positive definite, resulting that the asymptotic theory of regular statistical models does not hold. In such a system, if the true distribution is a singularity of the model, or if it is sufficiently far from the singularity, then its behavior was theoretically clarified. However, if the true distribution is in the neighborhood of a singularity, then its behavior depends on the dimension of the input data. In this paper, we study an RBF network for one dimensional inputs and experimentally clarified the followings. (1) If the distance of the true distribution and singularity is made longer from zero, then the generalization error becomes larger. (2) If the distance is made longer the first case, then the generalization error becomes smaller. | |
| キーワード | （和） | 特異モデル / RBFネットワーク / 特異点近傍 / / / / / |
| （英） | singular model / RBF network / neighborhoods of singularities / / / / / | |
| 文献情報 | 信学技報, vol. 110, no. 461, NC2010-168, pp. 241-246, 2011年3月. | |
| 資料番号 | NC2010-168 | |
| 発行日 | 2011-02-28 (NC) | |
| ISSN | Print edition: ISSN 0913-5685 Online edition: ISSN 2432-6380 | |
| 著作権に ついて |
技術研究報告に掲載された論文の著作権は電子情報通信学会に帰属します．(許諾番号：10GA0019/12GB0052/13GB0056/17GB0034/18GB0034) | |
| PDFダウンロード | NC2010-168 |
|
| 研究会情報 | |
| 研究会 | NC MBE |
| 開催期間 | 2011-03-07 - 2011-03-09 |
| 開催地（和） | 玉川大学 |
| 開催地（英） | Tamagawa University |
| テーマ（和） | 一般 |
| テーマ（英） | |
| 講演論文情報の詳細 | |
| 申込み研究会 | NC |
| 会議コード | 2011-03-NC-MBE |
| 本文の言語 | 日本語 |
| タイトル（和） | RBFネットワークのベイズ推測における特異点近傍での汎化誤差について |
| サブタイトル（和） | |
| タイトル（英） | On the Bayes generalization error of RBF network in neighborhoods of singularities |
| サブタイトル（英） | |
| キーワード(1)（和/英） | 特異モデル / singular model |
| キーワード(2)（和/英） | RBFネットワーク / RBF network |
| キーワード(3)（和/英） | 特異点近傍 / neighborhoods of singularities |
| キーワード(4)（和/英） | / |
| キーワード(5)（和/英） | / |
| キーワード(6)（和/英） | / |
| キーワード(7)（和/英） | / |
| キーワード(8)（和/英） | / |
| 第1著者 氏名（和/英/ヨミ） | 幸島 匡宏 / Masahiro Kohjima / コウジマ マサヒロ |
| 第1著者 所属（和/英） | 東京工業大学 (略称： 東工大) Tokyo Institute of Technology (略称： Tokyo Tech) |
| 第2著者 氏名（和/英/ヨミ） | 渡辺 澄夫 / Sumio Watanabe / ワタナベ スミオ |
| 第2著者 所属（和/英） | 東京工業大学 (略称： 東工大) Tokyo Institute of Technology (略称： Tokyo Tech) |
| 講演者 | 第1著者 |
| 発表日時 | 2011-03-08 11:05:00 |
| 発表時間 | 25分 |
| 申込先研究会 | NC |
| 資料番号 | NC2010-168 |
| 巻番号（vol） | vol.110 |
| 号番号（no） | no.461 |
| ページ範囲 | pp.241-246 |
| ページ数 | 6 |
| 発行日 | 2011-02-28 (NC) |
[研究会発表申込システムのトップページに戻る]