| 電子情報通信学会 研究会発表申込システム 講演論文 詳細 |
技報閲覧サービス [ログイン] 技報アーカイブ |
| トップに戻る | 前のページに戻る | [Japanese] / [English] |
| 講演抄録／キーワード | ||
| 講演名 | 2021-03-04 14:55 局所領域に着目したMulti-stream Neural Networksによる手話単語認識 ○丸山瑞己（阪府大）・Shuvozit Ghose（IIT）・井上勝文（阪府大）・Partha Pratim Roy（IIT）・岩村雅一・吉岡理文（阪府大）  PRMU2020-78 |
|
| 抄録 | （和） | 近年，手話認識に関する研究が広く行われおり，様々なアプローチが提案されている．中でも，行動認識のタスクのために提案されたI3Dネットワークを用いた手法は，大規模な手話認識データセットにおいて最も高い認識率を達成している．I3Dを用いた従来手法では，話者の全身もしくは上半身の外観情報のみを観測しているが，手話認識では手の形状や顔の表情のような局所的な情報や，体と手の位置関係が重要な意味を持つ．そこで，本研究では，手話認識において重要な要素である局所的な情報に加えて，体に対する手の位置を捉えるために骨格情報を追加で用いる．すなわち，既存のI3Dネットワークに，局所領域画像パッチを入力するストリームと，骨格情報を入力とするストリームを加えたMulti-stream構造のモデルによって，手話認識精度の向上を図る．大規模な手話データセットであるWLASLを用いた実験の結果，提案手法は従来手法に比べ，Top-1正解率において約15%の向上を達成した． |
| （英） | (Not available yet) | |
| キーワード | （和） | 手話認識 / ニューラルネットワーク / 深層学習 / I3D / ST-GCN / WLASL / MS-ASL / |
| （英） | / / / / / / / | |
| 文献情報 | 信学技報, vol. 120, no. 409, PRMU2020-78, pp. 53-58, 2021年3月. | |
| 資料番号 | PRMU2020-78 | |
| 発行日 | 2021-02-25 (PRMU) | |
| ISSN | Online edition: ISSN 2432-6380 | |
| 著作権に ついて |
技術研究報告に掲載された論文の著作権は電子情報通信学会に帰属します．(許諾番号：10GA0019/12GB0052/13GB0056/17GB0034/18GB0034) | |
| PDFダウンロード | PRMU2020-78 |
|
| 研究会情報 | |
| 研究会 | PRMU IPSJ-CVIM |
| 開催期間 | 2021-03-04 - 2021-03-05 |
| 開催地（和） | オンライン開催 |
| 開催地（英） | Online |
| テーマ（和） | 特殊な環境下におけるCV・ パターン認識 |
| テーマ（英） | Computer Vision and Pattern Recognition for specific environment |
| 講演論文情報の詳細 | |
| 申込み研究会 | PRMU |
| 会議コード | 2021-03-PRMU-CVIM |
| 本文の言語 | 日本語 |
| タイトル（和） | 局所領域に着目したMulti-stream Neural Networksによる手話単語認識 |
| サブタイトル（和） | |
| タイトル（英） | Word-level sign language recognition with Multi-stream Neural Networks Focusing on Local Region |
| サブタイトル（英） | |
| キーワード(1)（和/英） | 手話認識 / |
| キーワード(2)（和/英） | ニューラルネットワーク / |
| キーワード(3)（和/英） | 深層学習 / |
| キーワード(4)（和/英） | I3D / |
| キーワード(5)（和/英） | ST-GCN / |
| キーワード(6)（和/英） | WLASL / |
| キーワード(7)（和/英） | MS-ASL / |
| キーワード(8)（和/英） | / |
| 第1著者 氏名（和/英/ヨミ） | 丸山 瑞己 / Mizuki Maruyama / マルヤマ ミズキ |
| 第1著者 所属（和/英） | 大阪府立大学 (略称： 阪府大) Osaka Prefecture University (略称： Osaka Pref. Univ.) |
| 第2著者 氏名（和/英/ヨミ） | Shuvozit Ghose / Shuvozit Ghose / |
| 第2著者 所属（和/英） | Indian Institute of technology (略称： IIT) Indian Institute of technology (略称： IIT) |
| 第3著者 氏名（和/英/ヨミ） | 井上 勝文 / Katsufumi Inoue / イノウエ カツフミ |
| 第3著者 所属（和/英） | 大阪府立大学 (略称： 阪府大) Osaka Prefecture University (略称： Osaka Pref. Univ.) |
| 第4著者 氏名（和/英/ヨミ） | Partha Pratim Roy / Partha Pratim Roy / |
| 第4著者 所属（和/英） | Indian Institute of technology (略称： IIT) Indian Institute of technology (略称： IIT) |
| 第5著者 氏名（和/英/ヨミ） | 岩村 雅一 / Masakazu Iwamura / イワムラ マサカズ |
| 第5著者 所属（和/英） | 大阪府立大学 (略称： 阪府大) Osaka Prefecture University (略称： Osaka Pref. Univ.) |
| 第6著者 氏名（和/英/ヨミ） | 吉岡 理文 / Michifumi Yoshioka / ヨシオカ ミチフミ |
| 第6著者 所属（和/英） | 大阪府立大学 (略称： 阪府大) Osaka Prefecture University (略称： Osaka Pref. Univ.) |
| 講演者 | 第1著者 |
| 発表日時 | 2021-03-04 14:55:00 |
| 発表時間 | 15分 |
| 申込先研究会 | PRMU |
| 資料番号 | PRMU2020-78 |
| 巻番号（vol） | vol.120 |
| 号番号（no） | no.409 |
| ページ範囲 | pp.53-58 |
| ページ数 | 6 |
| 発行日 | 2021-02-25 (PRMU) |
[研究会発表申込システムのトップページに戻る]