| 講演抄録/キーワード |
| 講演名 |
2012-02-10 10:00
手話素単位を用いた大語彙手話認識 ○佐藤 新・篠田浩一(東工大) PRMU2011-222 SP2011-137 |
| 抄録 |
(和) |
手話認識における語彙を限定しない大語彙認識の一手法を提案する.従来の手話認識手法の多くは単語HMMを用いた認識が行われているが,これらの手法では大語彙手話認識にそのまま適用することは困難である.そこで,音声の大語彙認識における音素単位に倣って,手話のさらに細かい単位である手話素単位で手話をモデル化することによって大語彙手話認識が可能になると考えられる.そこでは,手話認識に適した手話素の定義ならびに手話素を用いた認識アルゴリズムの開発が課題となる.本手法では,手話を右手・左手各々の「手の位置・動き」「手の形」「手首の向き」計6種類の要素の時系列データの組で表現し,それぞれの要素における手話素単位およびそのHMMを定義する.そして,要素ごとの出力尤度の重み付き和を認識に用いる.評価実験としてDepthカメラで撮影された258単語のアメリカ手話に対して手話の孤立単語認識を行い,語彙クローズドの条件での単語HMMによる正解率93.7%に対して提案手法では78.2%を得た.また,469単語の語彙オープンの条件での提案手法の正解率は23.6%となった.さらに,話者非依存の条件では単語HMMの正解率11.5%に対して提案手法の正解率は18.8%となった. |
| (英) |
We propose a large vocabulary sign language recognition method. While most conventional methods used word units for sign language modeling, it is difficult to apply such methods to large-vocabulary recognition. Inspired by the use of phoneme units in speech recognition, we introduce "chereme" unit models in large-vocabulary sign language recognition. The problems are how to define cheremes and developing a recognition algorithm using cheremes. We first represent signs using the 6 elements: "hand movement-hold", "hand shape" and "wrist direction" of both hands. Then, we define chereme unit HMMs in each element. We use the weighted sum of output probabilities of the HMMs of these elements for recognition. We evaluated our method by using isolated sign language recognition. We achieved 78.2% word correct on the closed set of 258 words and 23.6% word correct on the open set with 469 words. We also achieved 18.8% word correct on speaker-independent recognition. |
| キーワード |
(和) |
大語彙手話認識 / 手話素 / 隠れマルコフモデル / / / / / |
| (英) |
large-vocabrary sign language recognition / chereme / hidden Markov model / / / / / |
| 文献情報 |
信学技報, vol. 111, no. 430, PRMU2011-222, pp. 155-160, 2012年2月. |
| 資料番号 |
PRMU2011-222 |
| 発行日 |
2012-02-02 (PRMU, SP) |
| ISSN |
Print edition: ISSN 0913-5685 Online edition: ISSN 2432-6380 |
著作権に ついて |
技術研究報告に掲載された論文の著作権は電子情報通信学会に帰属します.(許諾番号:10GA0019/12GB0052/13GB0056/17GB0034/18GB0034) |
| PDFダウンロード |
PRMU2011-222 SP2011-137 |