| 電子情報通信学会 研究会発表申込システム 講演論文 詳細 |
技報閲覧サービス [ログイン] 技報アーカイブ |
| トップに戻る | 前のページに戻る | [Japanese] / [English] |
| 講演抄録／キーワード | ||
| 講演名 | 2009-02-20 14:30 遠隔パソコン要約筆記のための指示語と指示動作との統合手法の検討 ○伊藤綾鹿・竹内義則・大西 昇（名大）・飯塚重善（NTT）・中嶌信弥（国士舘大）  WIT2008-57 |
|
| 抄録 | （和） | 講義における，聴覚障害者のための情報保障の1つに遠隔パソコン要約筆記がある．これは，講義の音声と映像を遠隔地にいる要約筆記者に送り，その情報を基に作成した要約筆記文を講義室内の聴覚障害者に提示するものである．しかし，講師が指示動作を行いながら指示語を発話した時に，要約筆記者がその指示動作を見ていないと，指示語に対応する指示対象物が分からなくなってしまうという問題が起こりうる．そこで，この問題を解決するために，講師音声から指示語を，講師映像からは指示動作及びその指示対象物を抽出し，指示語と指示対象物を関連付けて要約筆記者に提示するシステムの研究開発を行っている． 本研究では，講師音声からの指示語発話抽出手法として，音声認識を利用した手法を提案し，さらに，指示語抽出結果と指示動作抽出結果の統合手法も提案する．この統合手法は，指示語発話と指示動作の時間の関連性を利用している．そして，実際に収録した講義データに対して，指示語・指示動作抽出処理行い，さらに，統合処理を行った結果，再現率約91%，適合率約71%を得ることができた． |
| （英） | Remote transcription is one of the communication support methods for hearing impaired students in a lecture. A transcriber watches the lecture as captured by camera and microphone at a remote place and transcribes what an instructor says using a PC. The transcription is then shown on a display screen in the classroom. A transcriber sometimes misses a pointing object when the instructor utters a demonstrative word. In this situation, he/she is not able to assign the demonstrative word with the pointing object. To solve this problem, we are developing a system to assign the demonstrative words with the pointing objects, which are automatically extracted from the behavior of the instructor. In this paper, we propose a method to detect demonstrative words by using speech recognition technology and to integrate the demonstrative words with gestures. We have conducted experiments by using recorded audio-visual signals from a real lecture. Experimental results show that the recall ratio can be achieved about 91% and the relevance ratio, about 71%. |
|
| キーワード | （和） | 要約筆記 / 指示語発話抽出 / 指示動作抽出 / 統合処理 / / / / |
| （英） | Remote Captioning / Demonstrative Words Extraction / Gestures Extraction / Integration / / / / | |
| 文献情報 | 信学技報, vol. 108, no. 435, WIT2008-57, pp. 5-10, 2009年2月. | |
| 資料番号 | WIT2008-57 | |
| 発行日 | 2009-02-13 (WIT) | |
| ISSN | Print edition: ISSN 0913-5685 Online edition: ISSN 2432-6380 | |
| 著作権に ついて |
技術研究報告に掲載された論文の著作権は電子情報通信学会に帰属します．(許諾番号：10GA0019/12GB0052/13GB0056/17GB0034/18GB0034) | |
| PDFダウンロード | WIT2008-57 |
|
| 研究会情報 | |
| 研究会 | WIT |
| 開催期間 | 2009-02-20 - 2009-02-21 |
| 開催地（和） | 愛媛大学教育学部 |
| 開催地（英） | Ehime University |
| テーマ（和） | 聴覚と福祉情報工学・一般（共催：聴覚研究会） |
| テーマ（英） | Psychological and Physiological Acoustics and Well-being Information Technology |
| 講演論文情報の詳細 | |
| 申込み研究会 | WIT |
| 会議コード | 2009-02-WIT |
| 本文の言語 | 日本語 |
| タイトル（和） | 遠隔パソコン要約筆記のための指示語と指示動作との統合手法の検討 |
| サブタイトル（和） | |
| タイトル（英） | A Study on Integration of Demonstrative Words with Gestures for Remote Captioning |
| サブタイトル（英） | |
| キーワード(1)（和/英） | 要約筆記 / Remote Captioning |
| キーワード(2)（和/英） | 指示語発話抽出 / Demonstrative Words Extraction |
| キーワード(3)（和/英） | 指示動作抽出 / Gestures Extraction |
| キーワード(4)（和/英） | 統合処理 / Integration |
| キーワード(5)（和/英） | / |
| キーワード(6)（和/英） | / |
| キーワード(7)（和/英） | / |
| キーワード(8)（和/英） | / |
| 第1著者 氏名（和/英/ヨミ） | 伊藤 綾鹿 / Ayaka Ito / イトウ アヤカ |
| 第1著者 所属（和/英） | 名古屋大学 (略称： 名大) Nagoya University (略称： Nagoya Univ.) |
| 第2著者 氏名（和/英/ヨミ） | 竹内 義則 / Yoshinori Takeuchi / タケウチ ヨシノリ |
| 第2著者 所属（和/英） | 名古屋大学 (略称： 名大) Nagoya University (略称： Nagoya Univ.) |
| 第3著者 氏名（和/英/ヨミ） | 大西 昇 / Noboru Ohnishi / オオニシ ノボル |
| 第3著者 所属（和/英） | 名古屋大学 (略称： 名大) Nagoya University (略称： Nagoya Univ.) |
| 第4著者 氏名（和/英/ヨミ） | 飯塚 重善 / Shigeyoshi Iizuka / イイヅカ シゲヨシ |
| 第4著者 所属（和/英） | NTTネットワークサービスシステム研究所 (略称： NTT) NTT Network Service Systems Laboratories (略称： NTT) |
| 第5著者 氏名（和/英/ヨミ） | 中嶌 信弥 / Shinya Nakajima / ナカジマ シンヤ |
| 第5著者 所属（和/英） | 国士舘大学 (略称： 国士舘大) Kokushikan University (略称： Kokushikan Univ.) |
| 講演者 | 第1著者 |
| 発表日時 | 2009-02-20 14:30:00 |
| 発表時間 | 30分 |
| 申込先研究会 | WIT |
| 資料番号 | WIT2008-57 |
| 巻番号（vol） | vol.108 |
| 号番号（no） | no.435 |
| ページ範囲 | pp.5-10 |
| ページ数 | 6 |
| 発行日 | 2009-02-13 (WIT) |
[研究会発表申込システムのトップページに戻る]