講演抄録/キーワード |
講演名 |
2021-08-21 14:45
マルチモーダル特徴量を用いたターン管理の意欲と実際のターン交替の同時予測 ○石井 亮・Xutong Ren・Michal Muszynski・Louis-Philippe Morency(カーネギーメロン大) HCS2021-22 |
抄録 |
(和) |
これまで多くの研究が,実際のターン交替が起こるか否かを予測することに焦点を当ててきた.我々の知る限り,話し手と聞き手の2者のターン管理の意欲を明示的に扱って,それを推定する試みはない.本研究では,ターン管理の意欲を推定することに初めて取り組み,対話者の音声,言語,画像のマルチモーダル特徴量を用いた推定手法を提案する.さらに,従来のターン交替の予測タスクに,ターン管理の意欲の予測タスクを追加し,マルチタスク学習アプローチを用いた,高性能な新しいターン交替の予測モデルを提案する.最初に話し手と聞き手のターン管理の意欲のスコアを含む,新しい2者対話コーパスを紹介する.構築した予測モデルの性能評価の結果,話し手と聞き手のマルチモーダル特徴量を利用することで,ターン管理の意欲を高精度に予測可能であること,ターン管理の意欲とターン交替の予測タスクをマルチタスク学習によって同時にモデル化することで,ターン管理の意欲およびターン交替の予測性能が向上することを示す. |
(英) |
(Not available yet) |
キーワード |
(和) |
ターン管理の意欲 / ターン交替予測 / マルチタスク学習 / マルチモーダル深層学習 / / / / |
(英) |
/ / / / / / / |
文献情報 |
信学技報, vol. 121, no. 143, HCS2021-22, pp. 28-33, 2021年8月. |
資料番号 |
HCS2021-22 |
発行日 |
2021-08-14 (HCS) |
ISSN |
Online edition: ISSN 2432-6380 |
著作権に ついて |
技術研究報告に掲載された論文の著作権は電子情報通信学会に帰属します.(許諾番号:10GA0019/12GB0052/13GB0056/17GB0034/18GB0034) |
PDFダウンロード |
HCS2021-22 |
研究会情報 |
研究会 |
HCS |
開催期間 |
2021-08-21 - 2021-08-22 |
開催地(和) |
オンライン開催 |
開催地(英) |
Online |
テーマ(和) |
CSCWの理論・実践に関する研究および一般 |
テーマ(英) |
Theory and practice about CSCW |
講演論文情報の詳細 |
申込み研究会 |
HCS |
会議コード |
2021-08-HCS |
本文の言語 |
日本語 |
タイトル(和) |
マルチモーダル特徴量を用いたターン管理の意欲と実際のターン交替の同時予測 |
サブタイトル(和) |
|
タイトル(英) |
Joint Prediction of Turn-changing and Turn-management Willingness using Multimodal Features |
サブタイトル(英) |
|
キーワード(1)(和/英) |
ターン管理の意欲 / |
キーワード(2)(和/英) |
ターン交替予測 / |
キーワード(3)(和/英) |
マルチタスク学習 / |
キーワード(4)(和/英) |
マルチモーダル深層学習 / |
キーワード(5)(和/英) |
/ |
キーワード(6)(和/英) |
/ |
キーワード(7)(和/英) |
/ |
キーワード(8)(和/英) |
/ |
第1著者 氏名(和/英/ヨミ) |
石井 亮 / Ryo Ishii / イシイ リョウ |
第1著者 所属(和/英) |
カーネギーメロン大学 (略称: カーネギーメロン大)
Carnegie Mellon University (略称: CMU) |
第2著者 氏名(和/英/ヨミ) |
Xutong Ren / Xutong Ren / |
第2著者 所属(和/英) |
カーネギーメロン大学 (略称: カーネギーメロン大)
Carnegie Mellon University (略称: CMU) |
第3著者 氏名(和/英/ヨミ) |
Michal Muszynski / Michal Muszynski / |
第3著者 所属(和/英) |
カーネギーメロン大学 (略称: カーネギーメロン大)
Carnegie Mellon University (略称: CMU) |
第4著者 氏名(和/英/ヨミ) |
Louis-Philippe Morency / Louis-Philippe Morency / |
第4著者 所属(和/英) |
カーネギーメロン大学 (略称: カーネギーメロン大)
Carnegie Mellon University (略称: CMU) |
第5著者 氏名(和/英/ヨミ) |
/ / |
第5著者 所属(和/英) |
(略称: )
(略称: ) |
第6著者 氏名(和/英/ヨミ) |
/ / |
第6著者 所属(和/英) |
(略称: )
(略称: ) |
第7著者 氏名(和/英/ヨミ) |
/ / |
第7著者 所属(和/英) |
(略称: )
(略称: ) |
第8著者 氏名(和/英/ヨミ) |
/ / |
第8著者 所属(和/英) |
(略称: )
(略称: ) |
第9著者 氏名(和/英/ヨミ) |
/ / |
第9著者 所属(和/英) |
(略称: )
(略称: ) |
第10著者 氏名(和/英/ヨミ) |
/ / |
第10著者 所属(和/英) |
(略称: )
(略称: ) |
第11著者 氏名(和/英/ヨミ) |
/ / |
第11著者 所属(和/英) |
(略称: )
(略称: ) |
第12著者 氏名(和/英/ヨミ) |
/ / |
第12著者 所属(和/英) |
(略称: )
(略称: ) |
第13著者 氏名(和/英/ヨミ) |
/ / |
第13著者 所属(和/英) |
(略称: )
(略称: ) |
第14著者 氏名(和/英/ヨミ) |
/ / |
第14著者 所属(和/英) |
(略称: )
(略称: ) |
第15著者 氏名(和/英/ヨミ) |
/ / |
第15著者 所属(和/英) |
(略称: )
(略称: ) |
第16著者 氏名(和/英/ヨミ) |
/ / |
第16著者 所属(和/英) |
(略称: )
(略称: ) |
第17著者 氏名(和/英/ヨミ) |
/ / |
第17著者 所属(和/英) |
(略称: )
(略称: ) |
第18著者 氏名(和/英/ヨミ) |
/ / |
第18著者 所属(和/英) |
(略称: )
(略称: ) |
第19著者 氏名(和/英/ヨミ) |
/ / |
第19著者 所属(和/英) |
(略称: )
(略称: ) |
第20著者 氏名(和/英/ヨミ) |
/ / |
第20著者 所属(和/英) |
(略称: )
(略称: ) |
講演者 |
第1著者 |
発表日時 |
2021-08-21 14:45:00 |
発表時間 |
25分 |
申込先研究会 |
HCS |
資料番号 |
HCS2021-22 |
巻番号(vol) |
vol.121 |
号番号(no) |
no.143 |
ページ範囲 |
pp.28-33 |
ページ数 |
6 |
発行日 |
2021-08-14 (HCS) |