お知らせ 研究会の開催と会場に参加される皆様へのお願い(2022年6月開催~)
電子情報通信学会 研究会発表申込システム
講演論文 詳細
技報閲覧サービス
[ログイン]
技報アーカイブ
 トップに戻る 前のページに戻る   [Japanese] / [English] 

講演抄録/キーワード
講演名 2021-03-04 14:55
局所領域に着目したMulti-stream Neural Networksによる手話単語認識
丸山瑞己阪府大)・Shuvozit GhoseIIT)・井上勝文阪府大)・Partha Pratim RoyIIT)・岩村雅一吉岡理文阪府大PRMU2020-78
抄録 (和) 近年,手話認識に関する研究が広く行われおり,様々なアプローチが提案されている.中でも,行動認識のタスクのために提案されたI3Dネットワークを用いた手法は,大規模な手話認識データセットにおいて最も高い認識率を達成している.I3Dを用いた従来手法では,話者の全身もしくは上半身の外観情報のみを観測しているが,手話認識では手の形状や顔の表情のような局所的な情報や,体と手の位置関係が重要な意味を持つ.そこで,本研究では,手話認識において重要な要素である局所的な情報に加えて,体に対する手の位置を捉えるために骨格情報を追加で用いる.すなわち,既存のI3Dネットワークに,局所領域画像パッチを入力するストリームと,骨格情報を入力とするストリームを加えたMulti-stream構造のモデルによって,手話認識精度の向上を図る.大規模な手話データセットであるWLASLを用いた実験の結果,提案手法は従来手法に比べ,Top-1正解率において約15%の向上を達成した. 
(英) (Available after conference date)
キーワード (和) 手話認識 / ニューラルネットワーク / 深層学習 / I3D / ST-GCN / WLASL / MS-ASL /  
(英) / / / / / / /  
文献情報 信学技報, vol. 120, no. 409, PRMU2020-78, pp. 53-58, 2021年3月.
資料番号 PRMU2020-78 
発行日 2021-02-25 (PRMU) 
ISSN Print edition: ISSN 0913-5685  Online edition: ISSN 2432-6380
著作権に
ついて
技術研究報告に掲載された論文の著作権は電子情報通信学会に帰属します.(許諾番号:10GA0019/12GB0052/13GB0056/17GB0034/18GB0034)
PDFダウンロード PRMU2020-78

研究会情報
研究会 PRMU IPSJ-CVIM  
開催期間 2021-03-04 - 2021-03-05 
開催地(和) オンライン開催 
開催地(英) Online 
テーマ(和) 特殊な環境下におけるCV・ パターン認識 
テーマ(英) Computer Vision and Pattern Recognition for specific environment 
講演論文情報の詳細
申込み研究会 PRMU 
会議コード 2021-03-PRMU-CVIM 
本文の言語 日本語 
タイトル(和) 局所領域に着目したMulti-stream Neural Networksによる手話単語認識 
サブタイトル(和)  
タイトル(英) Word-level sign language recognition with Multi-stream Neural Networks Focusing on Local Region 
サブタイトル(英)  
キーワード(1)(和/英) 手話認識 /  
キーワード(2)(和/英) ニューラルネットワーク /  
キーワード(3)(和/英) 深層学習 /  
キーワード(4)(和/英) I3D /  
キーワード(5)(和/英) ST-GCN /  
キーワード(6)(和/英) WLASL /  
キーワード(7)(和/英) MS-ASL /  
キーワード(8)(和/英) /  
第1著者 氏名(和/英/ヨミ) 丸山 瑞己 / Mizuki Maruyama / マルヤマ ミズキ
第1著者 所属(和/英) 大阪府立大学 (略称: 阪府大)
Osaka Prefecture University (略称: Osaka Pref. Univ.)
第2著者 氏名(和/英/ヨミ) Shuvozit Ghose / Shuvozit Ghose /
第2著者 所属(和/英) Indian Institute of technology (略称: IIT)
Indian Institute of technology (略称: IIT)
第3著者 氏名(和/英/ヨミ) 井上 勝文 / Katsufumi Inoue / イノウエ カツフミ
第3著者 所属(和/英) 大阪府立大学 (略称: 阪府大)
Osaka Prefecture University (略称: Osaka Pref. Univ.)
第4著者 氏名(和/英/ヨミ) Partha Pratim Roy / Partha Pratim Roy /
第4著者 所属(和/英) Indian Institute of technology (略称: IIT)
Indian Institute of technology (略称: IIT)
第5著者 氏名(和/英/ヨミ) 岩村 雅一 / Masakazu Iwamura / イワムラ マサカズ
第5著者 所属(和/英) 大阪府立大学 (略称: 阪府大)
Osaka Prefecture University (略称: Osaka Pref. Univ.)
第6著者 氏名(和/英/ヨミ) 吉岡 理文 / Michifumi Yoshioka / ヨシオカ ミチフミ
第6著者 所属(和/英) 大阪府立大学 (略称: 阪府大)
Osaka Prefecture University (略称: Osaka Pref. Univ.)
第7著者 氏名(和/英/ヨミ) / /
第7著者 所属(和/英) (略称: )
(略称: )
第8著者 氏名(和/英/ヨミ) / /
第8著者 所属(和/英) (略称: )
(略称: )
第9著者 氏名(和/英/ヨミ) / /
第9著者 所属(和/英) (略称: )
(略称: )
第10著者 氏名(和/英/ヨミ) / /
第10著者 所属(和/英) (略称: )
(略称: )
第11著者 氏名(和/英/ヨミ) / /
第11著者 所属(和/英) (略称: )
(略称: )
第12著者 氏名(和/英/ヨミ) / /
第12著者 所属(和/英) (略称: )
(略称: )
第13著者 氏名(和/英/ヨミ) / /
第13著者 所属(和/英) (略称: )
(略称: )
第14著者 氏名(和/英/ヨミ) / /
第14著者 所属(和/英) (略称: )
(略称: )
第15著者 氏名(和/英/ヨミ) / /
第15著者 所属(和/英) (略称: )
(略称: )
第16著者 氏名(和/英/ヨミ) / /
第16著者 所属(和/英) (略称: )
(略称: )
第17著者 氏名(和/英/ヨミ) / /
第17著者 所属(和/英) (略称: )
(略称: )
第18著者 氏名(和/英/ヨミ) / /
第18著者 所属(和/英) (略称: )
(略称: )
第19著者 氏名(和/英/ヨミ) / /
第19著者 所属(和/英) (略称: )
(略称: )
第20著者 氏名(和/英/ヨミ) / /
第20著者 所属(和/英) (略称: )
(略称: )
講演者 第1著者 
発表日時 2021-03-04 14:55:00 
発表時間 15分 
申込先研究会 PRMU 
資料番号 PRMU2020-78 
巻番号(vol) vol.120 
号番号(no) no.409 
ページ範囲 pp.53-58 
ページ数
発行日 2021-02-25 (PRMU) 


[研究会発表申込システムのトップページに戻る]

[電子情報通信学会ホームページ]


IEICE / 電子情報通信学会