| 講演抄録/キーワード |
| 講演名 |
2020-05-15 09:35
社会関係を活用した映像会話シーンにおける雰囲気の推定 ○杉山瑠菜・王 彧・加藤ジェーン(立命館大) PRMU2020-5 |
| 抄録 |
(和) |
本研究では,人物の会話シーンにおける場の雰囲気を認識することを目的として,モデル学習のためのデータセットのラベリング手法と雰囲気の推定手法を提案する.データセットのラベリングにおいて,雰囲気のような主観的な属性を持つラベルを付与することは困難である.このようなラベルを公平に付与するために,ペアワイズ比較のアプローチを用いる方法を提案し,3000本のビデオデータセットを作成した.一方,雰囲気の推定にあたっては,コミュニケーションのシーンにおける複雑な場の状況を捉えるため,Two-stream CNNをベースに,登場人物の社会関係を付加情報として活用したアプローチを提案する.実験では,提案手法の有効性を定量的に評価し,雰囲気の推定精度が向上することを確認した. |
| (英) |
The objective of this work is to estimate the atmosphere of the conversation scenes. Because the atmosphere is a subjective attribute, it is difficult to prepare training data in the first place. In this work, we proposed a method for labeling such a kind of attribute by using pair-wise comparison and prepared a dataset that consists of 3000 videos. On the other hand, because the atmosphere is complex hard to estimate, it is necessary to capture the different aspects of the conversation scene in advance. We thus proposed a novel approach that utilizes the Two-stream CNN as the backbone and the social relation recognition as an additional task. The proposed approach learns rich video representation, and we confirm its effectiveness on our dataset quantitively. |
| キーワード |
(和) |
Two-stream CNN / 雰囲気 / 映像認識 / / / / / |
| (英) |
Two-stream CNN / Atmosphere / Video Recognition / / / / / |
| 文献情報 |
信学技報, vol. 120, no. 14, PRMU2020-5, pp. 23-28, 2020年5月. |
| 資料番号 |
PRMU2020-5 |
| 発行日 |
2020-05-07 (PRMU) |
| ISSN |
Online edition: ISSN 2432-6380 |
著作権に ついて |
技術研究報告に掲載された論文の著作権は電子情報通信学会に帰属します.(許諾番号:10GA0019/12GB0052/13GB0056/17GB0034/18GB0034) |
| PDFダウンロード |
PRMU2020-5 |