| 講演抄録／キーワード |
| 講演名 |
2015-12-16 16:20
集団的一人称視点映像解析に基づく複数人対話の自動視線分析
○熊野史朗・大塚和弘・石井 亮・大和淳司（NTT） |
| 抄録 |
（和） |
本稿では，全員が内向き・外向きの双方向を撮影するウェアラブルカメラを装着した 複数人対話を対象として， 個人の特性や内部状態を表す重要指標の一つである視線行動をほぼ自動で分析する方法を提案する． 提案法は，多くの既存のアイトラッカが必要とするユーザの既知点の固視による 事前校正作業を必要としない． 唯一の人手処理は，外向き映像中にいる各人物用に顔追跡器を初期化するだけである． 提案法は，これらの情報と，話者検出の結果を統合して， 各人物が話し手／聞き手の際に相手のどの部位を注視していたかのヒートマップを作成する． 著者らはこれを集団的一人称視点映像解析技術と呼ぶ． 六人グループの対話を用いた実験により，提案法の有効性が確認された． |
| （英） |
We target medium-sized-party face-to-face conversations where each person wears inward- and outward-facing cameras. We demonstrate that the fundamental techniques required for group gaze analysis, i.e. speaker detection, face tracking, and gaze estimation, can be accurately and effectively performed via self-training in a unified framework. This is achieved by gathering captured audio-visual signals to a centralized system and using a general conversation rule, i.e. listeners look mainly at the speaker. We visualize the characteristics of participants' gaze behavior as a gazee-centered heat map, which quantitatively reveals what parts of the gazee's body and for how long the participant looked at it while the gazer speaks or listens. An experiment involving two groups of six-person conversations demonstrates the potential of the proposed framework. |
| キーワード |
（和） |
一人称視点映像 / 視線 / 対話 / 校正 / 発話 / / / |
| （英） |
Egocentric vision / gaze / eye-contact / multiparty meeting / calibration / utterance / / |
| 文献情報 |
信学技報 |
| 資料番号 |
|
| 発行日 |
|
| ISSN |
|
| PDFダウンロード |
|