講演抄録/キーワード |
講演名 |
2015-03-03 10:45
[ポスター講演]多人数会話におけるマルチモーダル音源数推定 ○若林佑幸・中山雅人・西浦敬信・山下洋一(立命館大) EA2014-120 SIP2014-161 SP2014-183 |
抄録 |
(和) |
音源数はブラインド音源分離や部分空間法を用いた音源定位推定において重要な役割を果たす.音源分離では分離数,音源定位推定では信号部分空間の次元を決定するために、音源数が用いられる.音源数が実音源数と異なる場合,分離性能や定位性能が劣化する.そのため,これらの分野において音源数は既知であると仮定されている.
しかし,人間同士の自然な会話において事前に音源数を知ることは困難である.
一方,近年マルチモーダル信号処理に関するアプローチに注目が集まっている.音声や視線やジェスチャ,触覚などのように異なるセンサから受信された信号を統合することにより単一の信号による手法と比較し,性能の改善,制約の緩和,問題の簡略化が期待される.
本稿では,音響情報と画像情報との統合によるマルチモーダル信号処理に注目し,多人数会話におけるマルチモーダル音源数推定について提案し,評価を行った.音響情報から空間スペクトル尤度を,画像情報からはそのモデルを推定し,そのスペクトル距離を利用し,音源数の推定を行った.提案手法による推定結果では従来手法と比較し,大きく精度が改善された. |
(英) |
Source number plays an important role in blind source separation (BSS) and sound source localization (SSL) based on subspace approach and is used in order to determined the number of separation signals in BSS and the dimension of the signal subspace in SSL. In these fields, it is assumed that source number is given.
However, it is impossible to know the number in natural conversations. Recently attention is focused on multi-modal signal processing.
Integration between signals received by different sensors, for example an acoustic signal and an image signal, enables to simplify a difficult problem and to improve the performance of the signal processing, compared with single signal processing. This paper proposes multi-modal source number estimation in multi-party conversations by using acoustic and image information.
Experiments shows the proposed method outperforms the conventional method. |
キーワード |
(和) |
音源数推定 / MUSIC法 / マルチモーダル信号処理 / 多人数会話 / / / / |
(英) |
Source Number Estimation / MUSIC Method / Multi-modal Signal Processing / Multi-party Conversations / / / / |
文献情報 |
信学技報, vol. 114, no. 474, SIP2014-161, pp. 267-272, 2015年3月. |
資料番号 |
SIP2014-161 |
発行日 |
2015-02-23 (EA, SIP, SP) |
ISSN |
Print edition: ISSN 0913-5685 Online edition: ISSN 2432-6380 |
著作権に ついて |
技術研究報告に掲載された論文の著作権は電子情報通信学会に帰属します.(許諾番号:10GA0019/12GB0052/13GB0056/17GB0034/18GB0034) |
PDFダウンロード |
EA2014-120 SIP2014-161 SP2014-183 |
|