| 講演抄録/キーワード |
| 講演名 |
2024-03-18 10:25
環境音認識によりインタラクティブにオノマトペを表示するAR擬音語学習システム ○有隅惟人・平尾悠太朗・ペルスキアエルナンデス モニカ(奈良先端大)・磯山直也(大妻女子大)・内山英昭・清川 清(奈良先端大) WIT2023-40 |
| 抄録 |
(和) |
近年,在留外国人の増加や,聴覚障碍者の社会進出の広まりによって,彼らの日本語指導を行う施策が数多くされてきている.中でもオノマトペは日本人が日常的に使用することに加えて,その種類の多さから学習のハードルが高い.特に叩く強さで言葉が変化する擬音語はインタラクティブな学習が必要である.そこで,我々は環境音をオノマトペとしてその場に表示する擬音語学習システムを作成した.また,外国人留学生と聴覚障碍者に対してシステムを使った擬音語学習実験を行い,学習効果の観点からシステムの評価を行った.実験の結果,単語帳を用いた学習と同程度の学習効果を確認し,単語帳で学習した参加者に比べてオノマトペの再現性が高かったことを確認した. |
| (英) |
In recent years, due to the increase in foreign residents and the expansion of social participation among people with hearing impairments, numerous measures have been implemented for their Japanese language instruction. Among these, onomatopoeia presents a significant learning challenge due to its frequent use by Japanese people and the vast variety of expressions. Especially, onomatopoeic words that change with the intensity of actions, such as hitting, require interactive learning methods. Therefore, we have developed a learning system that displays onomatopoeic words as environmental sounds in real-time. We also conducted an experimental study on the learning of onomatopoeic words using this system with foreign students and people with hearing impairments, evaluating the system from the perspective of learning effects. The results of the experiment confirmed that the learning effectiveness was comparable to that of studying with flashcards, and the participants who used the system demonstrated higher reproducibility of onomatopoeia than those who studied with flashcards. |
| キーワード |
(和) |
拡張現実 / 日本語学習者 / 聴覚障碍者 / 環境音認識 / 音源方向推定 / / / |
| (英) |
Augmented Reality / Japanease Learner / Hearing Impairments / Environmental Sound Classification / Sound Source Localization / / / |
| 文献情報 |
信学技報, vol. 123, no. 447, WIT2023-40, pp. 7-12, 2024年3月. |
| 資料番号 |
WIT2023-40 |
| 発行日 |
2024-03-11 (WIT) |
| ISSN |
Online edition: ISSN 2432-6380 |
著作権に ついて |
技術研究報告に掲載された論文の著作権は電子情報通信学会に帰属します.(許諾番号:10GA0019/12GB0052/13GB0056/17GB0034/18GB0034) |
| PDFダウンロード |
WIT2023-40 |