| 講演抄録/キーワード |
| 講演名 |
2022-03-09 09:45
オプティカルフローを用いた運動情報のエンコーディングによる弱教師ありインスタンスセグメンテーションの改善 ○池田 純・森 純一郎(東大) IMQ2021-15 IE2021-77 MVE2021-44 |
| 抄録 |
(和) |
弱教師ありインスタンスセグメンテーションは,モデルの学習に要するアノテーションコストの大幅な削減を可能にする重要なタスクである. 先行研究では静止画から得られる共時的な外観情報を活用して物体の検出や領域分割を試みている. しかし,外観が識別的でない物体の認識に課題がある. 本論文では,画像シーケンスから得られる運動情報を用いてこの問題に取り組む. 具体的には,画像とオプティカルフローから抽出した外観特徴と運動特徴をそれぞれ適切に活用するエンコーダを提案する. また,マスクヘッドによるセグメンテーションを監視するために,従来研究において我々が提案した,外観情報と運動情報を両方考慮したペアワイズ損失を採用する. 我々がYouTube-VIS 2019データセットにおいて提案手法の性能を定量的に評価した結果,提案手法が既存の最先端手法のAPを3.1%改善する結果が得られた. |
| (英) |
Weakly supervised instance segmentation is an important task that can significantly reduce the annotation cost of model training. Previous works have been using appearance information obtained from a single image for detection and segmentation. However, it poses the challenge of identifying objects with non-discriminative appearance. In this paper, we tackle this problem by using motion information from image sequences. Specifically, we propose a two-stream encoder that appropriately leverages appearance and motion features extracted from images and optical flows. In addition, we employ a pairwise loss that considers both appearance and motion information to supervise segmentation. We conduct extensive evaluations on the YouTube-VIS 2019 dataset. Our results demonstrate that the proposed method improves the AP of the state-of-the-art method by 3.1. |
| キーワード |
(和) |
インスタンスセグメンテーション / 弱教師あり学習 / オプティカルフロー / / / / / |
| (英) |
instance segmentation / weakly supervised learning / optical flow / / / / / |
| 文献情報 |
信学技報, vol. 121, no. 423, MVE2021-44, pp. 27-32, 2022年3月. |
| 資料番号 |
MVE2021-44 |
| 発行日 |
2022-03-02 (IMQ, IE, MVE) |
| ISSN |
Online edition: ISSN 2432-6380 |
著作権に ついて |
技術研究報告に掲載された論文の著作権は電子情報通信学会に帰属します.(許諾番号:10GA0019/12GB0052/13GB0056/17GB0034/18GB0034) |
| PDFダウンロード |
IMQ2021-15 IE2021-77 MVE2021-44 |
| 研究会情報 |
| 研究会 |
CQ IMQ MVE IE |
| 開催期間 |
2022-03-09 - 2022-03-11 |
| 開催地(和) |
オンライン開催 (Zoom) |
| 開催地(英) |
Online (Zoom) |
| テーマ(和) |
変化する生活での五感に訴えるオンラインメディアとその評価、および一般(魅力工学研究会協賛) |
| テーマ(英) |
Media of five senses, Multimedia, Media experience, Picture codinge, Image media quality, Network,quality and reliability, etc |
| 講演論文情報の詳細 |
| 申込み研究会 |
MVE |
| 会議コード |
2022-03-CQ-IMQ-MVE-IE |
| 本文の言語 |
日本語 |
| タイトル(和) |
オプティカルフローを用いた運動情報のエンコーディングによる弱教師ありインスタンスセグメンテーションの改善 |
| サブタイトル(和) |
|
| タイトル(英) |
Improving Weakly Supervised Instance Segmentation by Encoding Motion Information via Optical Flow |
| サブタイトル(英) |
|
| キーワード(1)(和/英) |
インスタンスセグメンテーション / instance segmentation |
| キーワード(2)(和/英) |
弱教師あり学習 / weakly supervised learning |
| キーワード(3)(和/英) |
オプティカルフロー / optical flow |
| キーワード(4)(和/英) |
/ |
| キーワード(5)(和/英) |
/ |
| キーワード(6)(和/英) |
/ |
| キーワード(7)(和/英) |
/ |
| キーワード(8)(和/英) |
/ |
| 第1著者 氏名(和/英/ヨミ) |
池田 純 / Jun Ikeda / イケダ ジュン |
| 第1著者 所属(和/英) |
東京大学 (略称: 東大)
The University of Tokyo (略称: UT) |
| 第2著者 氏名(和/英/ヨミ) |
森 純一郎 / Junichiro Mori / モリ ジュンイチロウ |
| 第2著者 所属(和/英) |
東京大学 (略称: 東大)
The University of Tokyo (略称: UT) |
| 第3著者 氏名(和/英/ヨミ) |
/ / |
| 第3著者 所属(和/英) |
(略称: )
(略称: ) |
| 第4著者 氏名(和/英/ヨミ) |
/ / |
| 第4著者 所属(和/英) |
(略称: )
(略称: ) |
| 第5著者 氏名(和/英/ヨミ) |
/ / |
| 第5著者 所属(和/英) |
(略称: )
(略称: ) |
| 第6著者 氏名(和/英/ヨミ) |
/ / |
| 第6著者 所属(和/英) |
(略称: )
(略称: ) |
| 第7著者 氏名(和/英/ヨミ) |
/ / |
| 第7著者 所属(和/英) |
(略称: )
(略称: ) |
| 第8著者 氏名(和/英/ヨミ) |
/ / |
| 第8著者 所属(和/英) |
(略称: )
(略称: ) |
| 第9著者 氏名(和/英/ヨミ) |
/ / |
| 第9著者 所属(和/英) |
(略称: )
(略称: ) |
| 第10著者 氏名(和/英/ヨミ) |
/ / |
| 第10著者 所属(和/英) |
(略称: )
(略称: ) |
| 第11著者 氏名(和/英/ヨミ) |
/ / |
| 第11著者 所属(和/英) |
(略称: )
(略称: ) |
| 第12著者 氏名(和/英/ヨミ) |
/ / |
| 第12著者 所属(和/英) |
(略称: )
(略称: ) |
| 第13著者 氏名(和/英/ヨミ) |
/ / |
| 第13著者 所属(和/英) |
(略称: )
(略称: ) |
| 第14著者 氏名(和/英/ヨミ) |
/ / |
| 第14著者 所属(和/英) |
(略称: )
(略称: ) |
| 第15著者 氏名(和/英/ヨミ) |
/ / |
| 第15著者 所属(和/英) |
(略称: )
(略称: ) |
| 第16著者 氏名(和/英/ヨミ) |
/ / |
| 第16著者 所属(和/英) |
(略称: )
(略称: ) |
| 第17著者 氏名(和/英/ヨミ) |
/ / |
| 第17著者 所属(和/英) |
(略称: )
(略称: ) |
| 第18著者 氏名(和/英/ヨミ) |
/ / |
| 第18著者 所属(和/英) |
(略称: )
(略称: ) |
| 第19著者 氏名(和/英/ヨミ) |
/ / |
| 第19著者 所属(和/英) |
(略称: )
(略称: ) |
| 第20著者 氏名(和/英/ヨミ) |
/ / |
| 第20著者 所属(和/英) |
(略称: )
(略称: ) |
| 第21著者 氏名(和/英/ヨミ) |
/ / |
| 第21著者 所属(和/英) |
(略称: )
(略称: ) |
| 第22著者 氏名(和/英/ヨミ) |
/ / |
| 第22著者 所属(和/英) |
(略称: )
(略称: ) |
| 第23著者 氏名(和/英/ヨミ) |
/ / |
| 第23著者 所属(和/英) |
(略称: )
(略称: ) |
| 第24著者 氏名(和/英/ヨミ) |
/ / |
| 第24著者 所属(和/英) |
(略称: )
(略称: ) |
| 第25著者 氏名(和/英/ヨミ) |
/ / |
| 第25著者 所属(和/英) |
(略称: )
(略称: ) |
| 第26著者 氏名(和/英/ヨミ) |
/ / |
| 第26著者 所属(和/英) |
(略称: )
(略称: ) |
| 第27著者 氏名(和/英/ヨミ) |
/ / |
| 第27著者 所属(和/英) |
(略称: )
(略称: ) |
| 第28著者 氏名(和/英/ヨミ) |
/ / |
| 第28著者 所属(和/英) |
(略称: )
(略称: ) |
| 第29著者 氏名(和/英/ヨミ) |
/ / |
| 第29著者 所属(和/英) |
(略称: )
(略称: ) |
| 第30著者 氏名(和/英/ヨミ) |
/ / |
| 第30著者 所属(和/英) |
(略称: )
(略称: ) |
| 第31著者 氏名(和/英/ヨミ) |
/ / |
| 第31著者 所属(和/英) |
(略称: )
(略称: ) |
| 第32著者 氏名(和/英/ヨミ) |
/ / |
| 第32著者 所属(和/英) |
(略称: )
(略称: ) |
| 第33著者 氏名(和/英/ヨミ) |
/ / |
| 第33著者 所属(和/英) |
(略称: )
(略称: ) |
| 第34著者 氏名(和/英/ヨミ) |
/ / |
| 第34著者 所属(和/英) |
(略称: )
(略称: ) |
| 第35著者 氏名(和/英/ヨミ) |
/ / |
| 第35著者 所属(和/英) |
(略称: )
(略称: ) |
| 第36著者 氏名(和/英/ヨミ) |
/ / |
| 第36著者 所属(和/英) |
(略称: )
(略称: ) |
| 講演者 |
第1著者 |
| 発表日時 |
2022-03-09 09:45:00 |
| 発表時間 |
25分 |
| 申込先研究会 |
MVE |
| 資料番号 |
IMQ2021-15, IE2021-77, MVE2021-44 |
| 巻番号(vol) |
vol.121 |
| 号番号(no) |
no.420(IMQ), no.422(IE), no.423(MVE) |
| ページ範囲 |
pp.27-32 |
| ページ数 |
6 |
| 発行日 |
2022-03-02 (IMQ, IE, MVE) |
|