| 講演抄録/キーワード |
| 講演名 |
2026-01-24 15:00
日本語対応機械読唇のためのデータセット構築 ○小川准祐・大石慶一朗・中川博之(岡山大) KBSE2025-49 |
| 抄録 |
(和) |
機械読唇は,機械学習や画像処理を用いて口唇などの動きの映像から発話内容を推測する技術である.この技術は,聴覚・発話障がい者のコミュニケーション支援や騒音環境下での音声認識への活用が期待されている.しかし,英語圏では大規模なデータセットが整備され研究が進展している一方,国内,つまり日本語においては依然として大規模かつ多様なデータセットの不足が課題となっている.本研究では,Web動画からラベル付きデータセットを構築するための自動化パイプラインを実装し,実際にパイプラインを用いて実環境下(in-the-wild)の日本語読唇データセットを構築した.構築されたデータセットが,機械読唇の学習データとして適切な品質を保っているかを評価し,有効な学習データであることを確認した. |
| (英) |
Visual Speech Recognition (VSR) is a technology that infers spoken content from visual footage of lip movements using machine learning and image processing. This technology holds promise for supporting communication for individuals with hearing or speech impairments and for enhancing speech recognition in noisy environments. However, while research in English-speaking regions has advanced with the availability of large-scale datasets, the scarcity of large-scale and diverse datasets remains a significant challenge for the Japanese language. In this study, we implemented an automated pipeline to construct labeled datasets from web videos and created an in-the-wild Japanese lip-reading dataset. We evaluated the quality of the constructed dataset to determine its suitability for VSR training and verified its effectiveness as a valid training resource. |
| キーワード |
(和) |
機械読唇 / データセット / 日本語対応 / 自動化パイプライン / / / / |
| (英) |
Visual Speech Recognition / Dataset / Japanese / Automated Pipeline / / / / |
| 文献情報 |
信学技報, vol. 125, no. 330, KBSE2025-49, pp. 66-71, 2026年1月. |
| 資料番号 |
KBSE2025-49 |
| 発行日 |
2026-01-16 (KBSE) |
| ISSN |
Online edition: ISSN 2432-6380 |
著作権に ついて |
技術研究報告に掲載された論文の著作権は電子情報通信学会に帰属します.(許諾番号:10GA0019/12GB0052/13GB0056/17GB0034/18GB0034) |
| PDFダウンロード |
KBSE2025-49 |