| 電子情報通信学会 研究会発表申込システム 講演論文 詳細 |
技報閲覧サービス [ログイン] 技報アーカイブ |
| トップに戻る | 前のページに戻る | [Japanese] / [English] |
| 講演抄録／キーワード | ||
| 講演名 | 音声と口唇縦線画像を融合した発話区間検出法 ○山口哲司・浜田 望（慶大）  HIP2007-161 |
|
| 抄録 | （和） | 発話区間検出(VAD)は音声認識技術におけるフロントエンド問題と位置づけられ，活発に研究されている．近年，雑音下においても発話区間を求めるため，音声情報に加え画像情報も用いるマルチモーダル処理をVADに関する研究がされている．本論文では，口唇縦線画像という画像特徴量を提案し，これと音声情報を融合した，高雑音下でも頑健なVAD手法を提案する．提案法は，まず口唇縦線画像を用い口唇動作区間を検出する．口唇縦線画像とは，話者の口唇中央を垂直に通過する線(口唇縦線)上の1次元画像を時間軸に沿って並べた時空間画像であり，口唇の縦方向の変化情報を内包しているため，そこから口唇の動作判断が可能となる．そして求めた口唇動作区間付近において，音声パワーとスペクトル情報を用いて区間内の発話音声の有無を確認し，発話の始点と終点を検出することにより最終的な発話区間を決定する．最後に評価実験において提案法の有効性を検証した．その結果，低SNR環境下においても提案法が有効性であることを確認した． |
| （英） | In this study, we propose a VAD estimation method under low signal to noise ratio environment by fusing audio and novel lip vertical line image. First, the proposed technique detects the interval where lips move by using lip vertical line image. Secondly, acoustic signal and its spectrum is used to detect an utterance voice interval. The final utterance interval is decided by combining these two intervals. Finally, the effectiveness of the proposal method is verified through experiments. | |
| キーワード | （和） | 発話区間検出 / マルチモーダル / 口唇縦線 / / / / / |
| （英） | Voice Activity Detection / VAD / / / / / / | |
| 文献情報 | 信学技報, vol. 107, no. 553, HIP2007-161, pp. 13-18, 2008年3月. | |
| 資料番号 | HIP2007-161 | |
| 発行日 | ||
| ISSN | Print edition: ISSN 0913-5685 Online edition: ISSN 2432-6380 | |
| 著作権に ついて |
技術研究報告に掲載された論文の著作権は電子情報通信学会に帰属します．(許諾番号：10GA0019/12GB0052/13GB0056/17GB0034/18GB0034) | |
| PDFダウンロード | HIP2007-161 |
|
| 研究会情報 | |
| 研究会 | HIP |
| 開催期間 | 2008-03-22 - 2008-03-23 |
| 開催地（和） | 北九州学術研究都市 |
| 開催地（英） | Kitakyushu Science and Research Park |
| テーマ（和） | ヒューマン情報処理一般 |
| テーマ（英） | |
| 講演論文情報の詳細 | |
| 申込み研究会 | HIP |
| 会議コード | 2008-03-HIP |
| 本文の言語 | 日本語 |
| タイトル（和） | 音声と口唇縦線画像を融合した発話区間検出法 |
| サブタイトル（和） | |
| タイトル（英） | Voice Activity Interval Detection by Fusing Audio and Lip Vertical Line Image |
| サブタイトル（英） | |
| キーワード(1)（和/英） | 発話区間検出 / Voice Activity Detection |
| キーワード(2)（和/英） | マルチモーダル / VAD |
| キーワード(3)（和/英） | 口唇縦線 / |
| キーワード(4)（和/英） | / |
| キーワード(5)（和/英） | / |
| キーワード(6)（和/英） | / |
| キーワード(7)（和/英） | / |
| キーワード(8)（和/英） | / |
| 第1著者 氏名（和/英/ヨミ） | 山口 哲司 / Tetsuji Yamaguchi / ヤマグチ テツジ |
| 第1著者 所属（和/英） | 慶応義塾大学 (略称： 慶大) Keio University (略称： Keio Univ.) |
| 第2著者 氏名（和/英/ヨミ） | 浜田 望 / Nozomu Hamada / ハマダ ノゾム |
| 第2著者 所属（和/英） | 慶応義塾大学 (略称： 慶大) Keio University (略称： Keio Univ.) |
| 講演者 | 第1著者 |
| 発表日時 | |
| 発表時間 | 分 |
| 申込先研究会 | HIP |
| 資料番号 | HIP2007-161 |
| 巻番号（vol） | vol.107 |
| 号番号（no） | no.553 |
| ページ範囲 | pp.13-18 |
| ページ数 | 6 |
| 発行日 | |
[研究会発表申込システムのトップページに戻る]