講演抄録/キーワード |
講演名 |
2015-08-04 10:00
視聴覚コンテンツにおける時系列としての臨場感推定モデルの構築 塚原将太・○小澤賢司・木下雄一朗・森勢将雅(山梨大) |
抄録 |
(和) |
臨場感は視聴覚に関わるコンテンツやシステムの性能評価に関して重要であるが,臨場感メータは今日まで実現されていない.著者らは臨場感を「システム臨場感」と「コンテンツ臨場感」という二つの側面から捉えているが,本研究ではコンテンツ臨場感に着目した.著者らは以前に聴覚コンテンツおよび視聴覚コンテンツに関して,コンテンツ全体に対する臨場感を推定するモデルを提案しているが,本研究ではその視聴覚臨場感推定モデルを拡張して時系列としての臨場感を推定可能とする.そのために,40種のコンテンツについて臨場感を時系列として観測したデータに基づき,モデルの拡張を行った.そのモデルは,500 ms 間隔で算出した6種の音響特徴量と14種の映像特徴量を入力とし,ニューラルネットワークにより臨場感を推定するものである.音響特徴量は,ラウドネス,シャープネス,ラフネス,音圧変化のダイナミックレンジとその標準偏差,そして音像移動の有無である.映像特徴量は,色相,輝度,彩度および物体移動に関するものである.構築したモデルの性能検証を行ったところ十分な性能が示されたので,臨場感メータ構築の礎になるものと考えている. |
(英) |
The sense of presence is often used to evaluate the performances of audio-visual (AV) content and systems. However, a presence meter has yet to be realized. We consider that the sense of presence can be divided into two aspects: system presence and content presence. In this study we focused on content presence. To estimate the overall presence of a content item, we have developed estimation models for the sense of presence in audio-only and audio-visual content. In this study, the audio-visual model is expanded to estimate the instantaneous presence in an AV content item. Initially, we conducted an evaluation experiment of the presence with 40 content items. Based on the experimental data, a neural-network-based model was developed by expanding the previous model. To express the variation in instantaneous presence, 6 audio-related features and 14 visual-related features, which are extracted from the content items in 500-ms intervals, are used as inputs for the model. The audio-related features are loudness, sharpness, roughness, dynamic range and standard deviation in sound pressure levels, and movement of sound images. The visual-related features involve hue, lightness, saturation, and movement of visual images. After constructing the model, a generalization test confirmed that the model is sufficiently accurate to estimate the instantaneous presence. Hence, the model should contribute to the development of a presence meter. |
キーワード |
(和) |
臨場感 / 視聴覚コンテンツ / ニューラルネットワーク / 時系列データ / / / / |
(英) |
sense of presence / audio-visual content / neural networks / time-series data / / / / |
文献情報 |
信学技報, vol. 115, pp. 41-46, 2015年8月. |
資料番号 |
|
発行日 |
2015-07-27 (EA) |
ISSN |
Print edition: ISSN 0913-5685 Online edition: ISSN 2432-6380 |
PDFダウンロード |
|
|