| 講演抄録/キーワード |
| 講演名 |
2015-03-06 16:30
聴覚障害者支援のためのマルチモーダル発話可視化に関する研究 ○鳥羽祐輔・堀内大祥・柗本真佑・佐伯幸郎・中村匡秀(神戸大)・内野智仁・横山知弘・武林靖浩(筑波大附属聴覚特別支援学校) LOIS2014-94 |
| 抄録 |
(和) |
聴覚障害者のコミュニケーション手段としては手話や筆談,口話法など様々な方法が存在するが,会議などの複数人かつ対面という状況では,それぞれ欠点を持つ.本研究では,聴覚障害者に対する健聴者の発話内容の理解支援のためのマルチモーダル発話可視化アプリケーションを提案する.本研究におけるマルチモーダルな可視化とは,複数の情報の提示・可視化モードを組み合わせた複合的な情報の提示手段のことを指す.音声認識を使った発話内容のテキスト化モードや,専門用語の説明モードなどを利用者自身が選択することで,様々な聴覚障害のレベルやニーズに合わせた情報保障を実現できると考える.さらに予備実験として,Googleが提供しているオープンな音声認識エンジン,Web Speech APIの発話認識精度の評価実験を行う. |
| (英) |
Although deaf and hard of hearing (D/HH) people have various communication ways such as sign language, conversation by writing, and lip-reading, each way has several disadvantages in one-to-many conversation. % such as meetings or conventions. This paper proposes a multi-modal visualization application in order to support D/HH people in understanding conversation with hearing people. Here, the term multi-modal visualization means providing informative contents by presenting multiple visualization modes. We suppose that selecting and combining each visualization mode by D/HH people themselves would be helpful for understanding of conversation. Additionally, we conduct a preliminary experiment for evaluating recognition accuracy of Web Speech API, which is voice recognition open software provided by Google. |
| キーワード |
(和) |
マルチモーダル発話可視化 / 聴覚障害者 / コミュニケーション支援 / 口話法 / 音声認識 / Web Speech API / / |
| (英) |
multi-modal speech visualization / deaf and hard of hearing people / supporting understanding conversation / lip-reading / voice recognition / Web Speech API / / |
| 文献情報 |
信学技報, vol. 114, no. 500, LOIS2014-94, pp. 191-196, 2015年3月. |
| 資料番号 |
LOIS2014-94 |
| 発行日 |
2015-02-26 (LOIS) |
| ISSN |
Print edition: ISSN 0913-5685 Online edition: ISSN 2432-6380 |
著作権に ついて |
技術研究報告に掲載された論文の著作権は電子情報通信学会に帰属します.(許諾番号:10GA0019/12GB0052/13GB0056/17GB0034/18GB0034) |
| PDFダウンロード |
LOIS2014-94 |