| 講演抄録/キーワード |
| 講演名 |
2015-12-08 15:00
聴覚障害者支援のための発話可視化モードの開発支援 ○鳥羽祐輔・柗本真佑・佐伯幸郎・中村匡秀(神戸大)・内野智仁・横山知弘・武林靖浩(筑波大附属聴覚特別支援学校) WIT2015-63 |
| 抄録 |
(和) |
我々の先行研究では,聴覚障害者に対する健聴者の発話内容の理解支援のためのマルチモーダル発話可視化アプリケーションを提案した.本アプリケーションによって発話者の音声や口型,その他発話理解に役立つ様々な情報を可視化したもの(可視化モード)を組み合わせて発話を多面的に可視化し,発話理解を支援することができる.ただし,この先行研究では具体的にどのように可視化モードの開発を支援するかについては検討されていなかった.そこで本稿ではマルチモーダル発話可視化アプリケーションにおける,可視化モードの開発支援に取り組む.具体的には,可視化モード開発の容易化を目的として制御の反転を取り入れる.またモード間・クライアント間でのデータ共有の仕組みの実現や,開発された可視化モードの公開・共有のためのシステムを検討する. |
| (英) |
We have proposed a multi-modal visualization application in order to support deaf and hard of hearing people in understanding conversation with hearing people.This application supports understanding conversation by presenting visualization modeswhich visualize various information,such as text from voice recognition, a shape of the speaker's mouth or other valuable information in delivering the content of the speech.However, the previous work did not discuss how we support development of visualization modes.In this paper, we tackle to support development of visualization modes on the multi-modal visualization application.We apply the idea of inversion of control to this application in order to simplify the development.In addition, we realize data communication across visualization modes and across clients,and discuss the system to publish and share visualization modes. |
| キーワード |
(和) |
マルチモーダル発話可視化 / 聴覚障害者 / 開発支援 / 制御の反転 / Pub/Subメッセージングモデル / / / |
| (英) |
Multi-modal speech visualization / deaf and hard of hearing people / development support / inversion of control / publish/subscribe pattern / / / |
| 文献情報 |
信学技報, vol. 115, no. 354, WIT2015-63, pp. 1-6, 2015年12月. |
| 資料番号 |
WIT2015-63 |
| 発行日 |
2015-12-01 (WIT) |
| ISSN |
Print edition: ISSN 0913-5685 Online edition: ISSN 2432-6380 |
著作権に ついて |
技術研究報告に掲載された論文の著作権は電子情報通信学会に帰属します.(許諾番号:10GA0019/12GB0052/13GB0056/17GB0034/18GB0034) |
| PDFダウンロード |
WIT2015-63 |