講演抄録/キーワード |
講演名 |
2013-11-22 14:00
舌特徴空間における言語学習者の違いを比較するための正規化とマッチング手法 ○守屋周祐・矢口勇一・照沼直樹・佐藤綜洋・ウィルソン イアン(会津大) SP2013-80 |
抄録 |
(和) |
本研究は発声の違いを舌の動きから抽出し, 数値化することで, L1スピーカーとL2スピーカーの違いを見つけることが主な目的である. 舌の動きの違いは, 発声者の発音の違いに直接影響する. そのことから, 発声者の母国を特定したり, L2スピーカーが苦労する発音の克服をL1スピーカーの舌の動きと直接比較することが出来るため, 適切なアプローチで指導できると考える. それを達成するにあたり, 我々は超音波を用いた舌の断面映像を使用し, 以下の手法を用いた. まず, 対象とするスピーカーから, 『The boy who cried wolf』の文を用いて, 舌の超音波画像を撮影し, 撮像された舌の動きから, Histogram of Oriented Gradients法を用いて, 移動情報をベクトルとして抽出する. 次に, 移動情報から得られたベクトルをKL展開によって次元圧縮する. この時, 舌の動く起点となるベクトルとその他のベクトルとの差の平均を求め, そのベクトルの向きを揃えることによってそれらを正規化した後, 各フレーム毎の差分ベクトルをDynamic Time Warpingで比較する. 実験の結果, 空間中に撮影環境や人毎に分割されていた空間においても, その中での移動情報を比較することが出来るようになった. |
(英) |
The main purpose of this research is specifying the articulation difference between L1 and L2 speakers by digitizing tongue motions and analyzing their differences between utterances. Differences in tongue motion directly influence speakers' pronunciation, so it may be possible to determine a speaker's L1 from tongue motion data. By comparing L1 and L2 speakers' tongue motion, we can also guide L2 speakers to improve their L2 pronunciation. In this research, we use coronal cross sections of the tongue taken by an ultrasound scanner to carry out the following: first, record the ultrasound of a speaker's tongue motion using the story "The Boy Who Cried Wolf." Then, sample mobility information by using histogram of oriented gradients. Next, use Karhunen-Loeve expansion to reduce the vector dimensions. At this time, we get the average difference between the starting vector of tongue motion and the subsequent vectors, then normalize the direction of the two averages. Finally, we use dynamic time warping to compare each vector per frame. The experiment results allowed us to compare speakers' tongue mobility information in words which were recorded in different experiment environments or by different speaker. |
キーワード |
(和) |
超音波舌画像 / 舌特徴空間 / 類似度 / 動的時間伸縮法 / / / / |
(英) |
Ultrasound Tongue Image / Midsagittal Ultrasound Tongue Image Space / Suitable Subspace / Dynamic Time Warping / / / / |
文献情報 |
信学技報, vol. 113, no. 308, SP2013-80, pp. 53-57, 2013年11月. |
資料番号 |
SP2013-80 |
発行日 |
2013-11-14 (SP) |
ISSN |
Print edition: ISSN 0913-5685 Online edition: ISSN 2432-6380 |
著作権に ついて |
技術研究報告に掲載された論文の著作権は電子情報通信学会に帰属します.(許諾番号:10GA0019/12GB0052/13GB0056/17GB0034/18GB0034) |
PDFダウンロード |
SP2013-80 |
|