講演抄録/キーワード |
講演名 |
2015-03-14 11:20
指示対象挿入機能を用いた要約筆記文作成システムの開発 ○堀池一希(名大)・竹内義則(大同大)・松本哲也・工藤博章・大西 昇(名大) WIT2014-109 |
抄録 |
(和) |
聴覚に障害のある学生が高等教育機関に通い,健聴者と一緒に講義を受ける機会が増えている.その際の支援の一つに要約筆記がある.現在の要約筆記の問題点として,要約筆記者が講師の指示動作を見逃し,指示語と指示対象との関連付けが困難になること,複雑な数式等の入力は非常に手間がかかることなどがある.そのため,まず本研究では,講義映像中から指示対象物をリアルタイムで抽出するシステムを作成した.そして,指示対象物を要約筆記者に提示し,要約筆記文中に直接埋め込むことができるシステムを提案する.リアルタイムでの指示対象の抽出実験の結果,56.3%の再現率,64.3%の適合率を得た.また,要約筆記文作成システムを用い,要約筆記実験及び,その評価を行った.その結果,システムの画像挿入の機能を使用して行った要約筆記の方が,使用しない場合に比べ,要約筆記文の作成環境が改善されている傾向が見られた. |
(英) |
The occasions are increasing for hearing impaired students to go to the universities and to attend with hearing students. Transcribing is a one of the support for hearing impaired students. One problem in current transcribing systems is that transcribers are not able to assign demonstrative words with the pointed object if they miss lecture’s pointing gesture. Another problem is that inputting complex mathematical formulas is hard for transcribers. In this study, we make a system which extracts pointed or directed objects from lecture videos in real time. Then, we propose a system that can show directed objects to transcribers and embed them directly in the transcription. We conducted an experiment to extract the directed objects corresponding to the lecture’s demonstrative word in real time. The experimental result shows a 56.3% for recall and 64.3% for precision in extractions. In addition, we conducted experiments to transcribe the lecture with the proposed system. As a result, there was a tendency that the environment for creating transcription is improved by using the function of inserting images. |
キーワード |
(和) |
要約筆記 / 画像挿入 / 指示対象抽出 / / / / / |
(英) |
Transcribing / Inserting Images / Directed Objects Extraction / / / / / |
文献情報 |
信学技報, vol. 114, no. 512, WIT2014-109, pp. 135-140, 2015年3月. |
資料番号 |
WIT2014-109 |
発行日 |
2015-03-06 (WIT) |
ISSN |
Print edition: ISSN 0913-5685 Online edition: ISSN 2432-6380 |
著作権に ついて |
技術研究報告に掲載された論文の著作権は電子情報通信学会に帰属します.(許諾番号:10GA0019/12GB0052/13GB0056/17GB0034/18GB0034) |
PDFダウンロード |
WIT2014-109 |