講演抄録/キーワード |
講演名 |
2011-07-25 13:45
ブレグマン情報量を用いたベイズ学習の局所変分近似 ○渡辺一帆(奈良先端大)・岡田真人(東大)・池田和司(奈良先端大) NC2011-25 |
抄録 |
(和) |
局所変分法はベイズ学習において事後分布を近似する一つの手法として用いられている.局所変分法では,計算困難な周辺尤度に対する上界及び下界を構成し,それぞれを最小化・最大化することにより近似を最適化するが,その情報論的な意味は明らかではなかった.本研究では,凸性に基づく局所変分法に対し,ブレグマンダイバージェンスを用いた一般的枠組みを示し,周辺尤度の上界の効率的な計算法を与える.またカーネルロジスティック回帰モデルへの適用例を示し,数値実験により近似精度を評価した結果を報告する. |
(英) |
The local variational method is a technique to approximate an intractable posterior distribution in Bayesian learning. This article formulates a general framework for local variational approximation using the Bregman divergence. Based on a geometrical argument in the space of approximating posteriors, we propose an efficient method to evaluate an upper bound of the marginal likelihood. We demonstrate its application to the kernelized logistic regression model and numerically investigate the accuracy of approximation. |
キーワード |
(和) |
ベイズ学習 / 局所変分近似 / カルバック情報量 / ブレグマン情報量 / カーネルロジスティック回帰 / / / |
(英) |
Bayesian Learning / Local Variational Approximation / Kullback Information / Bregman Divergence / Kernelized Logistic Regression / / / |
文献情報 |
信学技報, vol. 111, no. 157, NC2011-25, pp. 25-30, 2011年7月. |
資料番号 |
NC2011-25 |
発行日 |
2011-07-18 (NC) |
ISSN |
Print edition: ISSN 0913-5685 Online edition: ISSN 2432-6380 |
著作権に ついて |
技術研究報告に掲載された論文の著作権は電子情報通信学会に帰属します.(許諾番号:10GA0019/12GB0052/13GB0056/17GB0034/18GB0034) |
PDFダウンロード |
NC2011-25 |