講演抄録/キーワード |
講演名 |
2024-03-03 09:12
未知手話単語獲得に向けた手話動作特徴量空間の検討 ○山田大記・井上勝文(阪公立大)・Partha Prathim Roy(IIT)・岩村雅一・吉岡理文(阪公立大) PRMU2023-52 |
抄録 |
(和) |
近年,様々な手法が提案されている手話認識研究において大きな課題となるのが,データセット内の手話動画の語彙の不足である.この課題に対し,特に未学習の手話単語(未知単語)のデータに対して自動で学習動画の収集とラベル付けする手法が求められている.幸いYoutube等に多数字幕情報のついた手話動画が存在するため,これらの内,特定の未知単語が含まれる複数の動画より類似する動作を抽出することで,未知単語を自動獲得できるのではないかと期待されている.これを実現するために必要となりえる要素技術は,(1)類似の手話動作を精確に表現できる動作特徴量と,(2)その特徴量に基づいて,手話動画から目的の単語の部分を精確に切り出す処理である.本研究では,これの実現の第一歩として,手話単語の細かな動作を一つ一つ記述可能な3DCNNであるI3Dを用いて手話単語を表現する特徴量について検討する.本稿では,この特徴量表現の良し悪しを評価するテストヘッドとして,既知単語と未知単語を判別する問題を考え,特徴量の識別性能について評価した結果について述べる. |
(英) |
(Not available yet) |
キーワード |
(和) |
手話単語認識 / 3DCNN / I3D / クラスタリング / WLASL / 時空間特徴量 / / |
(英) |
/ / / / / / / |
文献情報 |
信学技報, vol. 123, no. 409, PRMU2023-52, pp. 7-12, 2024年3月. |
資料番号 |
PRMU2023-52 |
発行日 |
2024-02-25 (PRMU) |
ISSN |
Online edition: ISSN 2432-6380 |
著作権に ついて |
技術研究報告に掲載された論文の著作権は電子情報通信学会に帰属します.(許諾番号:10GA0019/12GB0052/13GB0056/17GB0034/18GB0034) |
PDFダウンロード |
PRMU2023-52 |