| 電子情報通信学会 研究会発表申込システム 講演論文 詳細 |
技報閲覧サービス [ログイン] 技報アーカイブ |
| トップに戻る | 前のページに戻る | [Japanese] / [English] |
| 講演抄録／キーワード | ||
| 講演名 | 2015-07-03 14:20 ［招待講演］全天球映像に対応したバイノーラル音を生成するための方向別収音に関する検討 ○丹羽健太・小泉悠馬・小林和則・植松 尚（NTT）  EA2015-7 |
|
| 抄録 | （和） | ヘッドマウンドディスプレイ(HMD)やスマートホンを用いて，全天球カメラで撮像した映像から，好きな方向の映像を見渡せるアプリケーションがサービス化されてきた。本研究の目的は，ユーザが見渡している映像に対応した音を生成することである。マイクロホンアレイを用いて観測した信号群を方向別に音源分離(方向別収音)し，頭部伝達特性(HRTF)を畳んだ後に再合成することで，ユーザの頭部方向に合ったバイノーラル音を仮想的に生成する。方向別収音の一方式として，局所PSD推定に基づいて，多チャネルのウィーナーフィルタを生成する方式を用いた。本研究では，立体視可能なHMDとヘッドホンを用いて，ユーザの頭部方向に応じた映像と音をリアルタイムに生成・提示可能な全天球映像音声視聴系を構築した。また，構築したシステムを用いた主観評価実験を通じて，映像に対応した音像定位を提示できているかについて調査した。実験結果より，40度程度の角度幅で方向別収音することで，全天球映像に対応した音像を定位できることを確認した。 |
| （英） | Web applications to gaze images corresponding to the user viewpoint through head mount display (HMD) or smartphone have been widely distributed. The goal of this study is to generate sounds corresponding to the user gazing images. Assuming that microphone array is used for sound recording, separated signals for each angular region can be generated. By convolving head related transfer functions (HRTF) and separated signals and re-synthesizing them, binaural sounds corresponding to the user-viewpoint could be generated virtually. As a method to achieve angular region-wise source enhancement, multichannel Wiener filter is generated based on the PSD estimation in beamspace method. In this study, we developed the system which user enables to watch arbitrary viewpoint through HMD and listen the corresponding binaural sounds through headphone. Through subjective tests, we confirmed that the sound localization corresponding to the user view can be obtained when applying around 40 degrees angular region-wise source enhancement. | |
| キーワード | （和） | 全天球映像 / マイクロホンアレイ / バイノーラル音 / 頭部伝達特性 / 音源分離 / / / |
| （英） | Omni-directional camera view / microphone array / binaural sound / head related transfer functions / source enhancement / / / | |
| 文献情報 | 信学技報, vol. 115, no. 126, EA2015-7, pp. 33-38, 2015年7月. | |
| 資料番号 | EA2015-7 | |
| 発行日 | 2015-06-26 (EA) | |
| ISSN | Print edition: ISSN 0913-5685 Online edition: ISSN 2432-6380 | |
| 著作権に ついて |
技術研究報告に掲載された論文の著作権は電子情報通信学会に帰属します．(許諾番号：10GA0019/12GB0052/13GB0056/17GB0034/18GB0034) | |
| PDFダウンロード | EA2015-7 |
|
| 研究会情報 | |
| 研究会 | EA |
| 開催期間 | 2015-07-03 - 2015-07-03 |
| 開催地（和） | 電気通信大学 創立80周年記念会館 |
| 開催地（英） | The Univ. of Electro-Communications, 80th Anniversary Memorial Hall |
| テーマ（和） | 一般，インタラクティブ収音・再生 |
| テーマ（英） | General topics, Interactive Acquisition and Reproduction |
| 講演論文情報の詳細 | |
| 申込み研究会 | EA |
| 会議コード | 2015-07-EA |
| 本文の言語 | 日本語 |
| タイトル（和） | 全天球映像に対応したバイノーラル音を生成するための方向別収音に関する検討 |
| サブタイトル（和） | |
| タイトル（英） | Study on angular region-wise source enhancement to generate binaural sounds corresponding to omni-directional camera view |
| サブタイトル（英） | |
| キーワード(1)（和/英） | 全天球映像 / Omni-directional camera view |
| キーワード(2)（和/英） | マイクロホンアレイ / microphone array |
| キーワード(3)（和/英） | バイノーラル音 / binaural sound |
| キーワード(4)（和/英） | 頭部伝達特性 / head related transfer functions |
| キーワード(5)（和/英） | 音源分離 / source enhancement |
| キーワード(6)（和/英） | / |
| キーワード(7)（和/英） | / |
| キーワード(8)（和/英） | / |
| 第1著者 氏名（和/英/ヨミ） | 丹羽 健太 / Kenta Niwa / ニワ ケンタ |
| 第1著者 所属（和/英） | 日本電信電話株式会社 (略称： NTT) Nippon Telegraph and Telephone Corporation (略称： NTT) |
| 第2著者 氏名（和/英/ヨミ） | 小泉 悠馬 / Yuma Koizumi / コイズミ ユウマ |
| 第2著者 所属（和/英） | 日本電信電話株式会社 (略称： NTT) Nippon Telegraph and Telephone Corporation (略称： NTT) |
| 第3著者 氏名（和/英/ヨミ） | 小林 和則 / Kazunori Kobayashi / コバヤシ カズノリ |
| 第3著者 所属（和/英） | 日本電信電話株式会社 (略称： NTT) Nippon Telegraph and Telephone Corporation (略称： NTT) |
| 第4著者 氏名（和/英/ヨミ） | 植松 尚 / Hisashi Uematsu / ウエマツ ヒサシ |
| 第4著者 所属（和/英） | 日本電信電話株式会社 (略称： NTT) Nippon Telegraph and Telephone Corporation (略称： NTT) |
| 講演者 | 第1著者 |
| 発表日時 | 2015-07-03 14:20:00 |
| 発表時間 | 40分 |
| 申込先研究会 | EA |
| 資料番号 | EA2015-7 |
| 巻番号（vol） | vol.115 |
| 号番号（no） | no.126 |
| ページ範囲 | pp.33-38 |
| ページ数 | 6 |
| 発行日 | 2015-06-26 (EA) |
[研究会発表申込システムのトップページに戻る]