| 講演抄録/キーワード |
| 講演名 |
2023-05-19 09:20
セグメンテーションマスクを利用した動画からの静的なNeRF表現の学習 ○大隣 嵩(東大)・池畑 諭(NII)・相澤清晴(東大) PRMU2023-7 |
| 抄録 |
(和) |
本論文では,人や車などの動く物体を含む動画を入力として,静的な背景シーンの抽出,NeRF表現の学習を行う課題に取り組む.現時点で最も精度良く静的な背景シーンを抽出できるRobustNeRFでは,学習が難しくパッチ内全体で誤差が大きくなる静的な背景を含む実世界のシーンでは,静的な背景と動くオブジェクトの区別ができず,静動分離に失敗してしまう.これに対して,本論文で導入するTest Time Augmentationにより獲得したセグメンテーションマスクを追加することで,既存手法では適用が難しかった学習が難しくパッチ内全体で誤差が大きくなる静的な背景を含む実世界のシーンに対して,効果的に動く物体が取り除かれることを実験を通して示した. |
| (英) |
In this paper, we tackle the problem of extracting static backgrounds from videos containing moving objects, such as people and cars. RobustNeRF, the current state-of-the-art method for extracting static backgrounds, often struggles to separate high-frequency static backgrounds from dynamic foregrounds in real-world scenes. We introduce Test Time Augmentation, and our experiments demonstrate that the additional segmentation masks effectively remove dynamic foregrounds in scenes with high-frequency static backgrounds, an area where existing methods have faced difficulties. |
| キーワード |
(和) |
NeRF / 任意視点画像合成 / シーン分解 / セマンティックセグメンテーション / / / / |
| (英) |
neural radiance field / NeRF / novel view synthesis / scene decomposition / semantic segmentation / / / |
| 文献情報 |
信学技報, vol. 123, no. 30, PRMU2023-7, pp. 33-38, 2023年5月. |
| 資料番号 |
PRMU2023-7 |
| 発行日 |
2023-05-11 (PRMU) |
| ISSN |
Online edition: ISSN 2432-6380 |
著作権に ついて |
技術研究報告に掲載された論文の著作権は電子情報通信学会に帰属します.(許諾番号:10GA0019/12GB0052/13GB0056/17GB0034/18GB0034) |
| PDFダウンロード |
PRMU2023-7 |
| 研究会情報 |
| 研究会 |
PRMU IPSJ-CVIM |
| 開催期間 |
2023-05-18 - 2023-05-19 |
| 開催地(和) |
名古屋工業大学 |
| 開催地(英) |
|
| テーマ(和) |
NeRF等のニューラルシーン表現 |
| テーマ(英) |
|
| 講演論文情報の詳細 |
| 申込み研究会 |
PRMU |
| 会議コード |
2023-05-PRMU-CVIM |
| 本文の言語 |
日本語 |
| タイトル(和) |
セグメンテーションマスクを利用した動画からの静的なNeRF表現の学習 |
| サブタイトル(和) |
|
| タイトル(英) |
Learning static NeRF representations from video using 2D segmentation masks |
| サブタイトル(英) |
|
| キーワード(1)(和/英) |
NeRF / neural radiance field |
| キーワード(2)(和/英) |
任意視点画像合成 / NeRF |
| キーワード(3)(和/英) |
シーン分解 / novel view synthesis |
| キーワード(4)(和/英) |
セマンティックセグメンテーション / scene decomposition |
| キーワード(5)(和/英) |
/ semantic segmentation |
| キーワード(6)(和/英) |
/ |
| キーワード(7)(和/英) |
/ |
| キーワード(8)(和/英) |
/ |
| 第1著者 氏名(和/英/ヨミ) |
大隣 嵩 / Takashi Otonari / オオトナリ タカシ |
| 第1著者 所属(和/英) |
東京大学 (略称: 東大)
The University of Tokyo (略称: Tokyo Univ.) |
| 第2著者 氏名(和/英/ヨミ) |
池畑 諭 / Satoshi Ikehata / イケハタ サトシ |
| 第2著者 所属(和/英) |
国立情報学研究所 (略称: NII)
National Institute of Informatics (略称: NII) |
| 第3著者 氏名(和/英/ヨミ) |
相澤 清晴 / Kiyoharu Aizawa / アイザワ キヨハル |
| 第3著者 所属(和/英) |
東京大学 (略称: 東大)
The University of Tokyo (略称: Tokyo Univ.) |
| 第4著者 氏名(和/英/ヨミ) |
/ / |
| 第4著者 所属(和/英) |
(略称: )
(略称: ) |
| 第5著者 氏名(和/英/ヨミ) |
/ / |
| 第5著者 所属(和/英) |
(略称: )
(略称: ) |
| 第6著者 氏名(和/英/ヨミ) |
/ / |
| 第6著者 所属(和/英) |
(略称: )
(略称: ) |
| 第7著者 氏名(和/英/ヨミ) |
/ / |
| 第7著者 所属(和/英) |
(略称: )
(略称: ) |
| 第8著者 氏名(和/英/ヨミ) |
/ / |
| 第8著者 所属(和/英) |
(略称: )
(略称: ) |
| 第9著者 氏名(和/英/ヨミ) |
/ / |
| 第9著者 所属(和/英) |
(略称: )
(略称: ) |
| 第10著者 氏名(和/英/ヨミ) |
/ / |
| 第10著者 所属(和/英) |
(略称: )
(略称: ) |
| 第11著者 氏名(和/英/ヨミ) |
/ / |
| 第11著者 所属(和/英) |
(略称: )
(略称: ) |
| 第12著者 氏名(和/英/ヨミ) |
/ / |
| 第12著者 所属(和/英) |
(略称: )
(略称: ) |
| 第13著者 氏名(和/英/ヨミ) |
/ / |
| 第13著者 所属(和/英) |
(略称: )
(略称: ) |
| 第14著者 氏名(和/英/ヨミ) |
/ / |
| 第14著者 所属(和/英) |
(略称: )
(略称: ) |
| 第15著者 氏名(和/英/ヨミ) |
/ / |
| 第15著者 所属(和/英) |
(略称: )
(略称: ) |
| 第16著者 氏名(和/英/ヨミ) |
/ / |
| 第16著者 所属(和/英) |
(略称: )
(略称: ) |
| 第17著者 氏名(和/英/ヨミ) |
/ / |
| 第17著者 所属(和/英) |
(略称: )
(略称: ) |
| 第18著者 氏名(和/英/ヨミ) |
/ / |
| 第18著者 所属(和/英) |
(略称: )
(略称: ) |
| 第19著者 氏名(和/英/ヨミ) |
/ / |
| 第19著者 所属(和/英) |
(略称: )
(略称: ) |
| 第20著者 氏名(和/英/ヨミ) |
/ / |
| 第20著者 所属(和/英) |
(略称: )
(略称: ) |
| 第21著者 氏名(和/英/ヨミ) |
/ / |
| 第21著者 所属(和/英) |
(略称: )
(略称: ) |
| 第22著者 氏名(和/英/ヨミ) |
/ / |
| 第22著者 所属(和/英) |
(略称: )
(略称: ) |
| 第23著者 氏名(和/英/ヨミ) |
/ / |
| 第23著者 所属(和/英) |
(略称: )
(略称: ) |
| 第24著者 氏名(和/英/ヨミ) |
/ / |
| 第24著者 所属(和/英) |
(略称: )
(略称: ) |
| 第25著者 氏名(和/英/ヨミ) |
/ / |
| 第25著者 所属(和/英) |
(略称: )
(略称: ) |
| 第26著者 氏名(和/英/ヨミ) |
/ / |
| 第26著者 所属(和/英) |
(略称: )
(略称: ) |
| 第27著者 氏名(和/英/ヨミ) |
/ / |
| 第27著者 所属(和/英) |
(略称: )
(略称: ) |
| 第28著者 氏名(和/英/ヨミ) |
/ / |
| 第28著者 所属(和/英) |
(略称: )
(略称: ) |
| 第29著者 氏名(和/英/ヨミ) |
/ / |
| 第29著者 所属(和/英) |
(略称: )
(略称: ) |
| 第30著者 氏名(和/英/ヨミ) |
/ / |
| 第30著者 所属(和/英) |
(略称: )
(略称: ) |
| 第31著者 氏名(和/英/ヨミ) |
/ / |
| 第31著者 所属(和/英) |
(略称: )
(略称: ) |
| 第32著者 氏名(和/英/ヨミ) |
/ / |
| 第32著者 所属(和/英) |
(略称: )
(略称: ) |
| 第33著者 氏名(和/英/ヨミ) |
/ / |
| 第33著者 所属(和/英) |
(略称: )
(略称: ) |
| 第34著者 氏名(和/英/ヨミ) |
/ / |
| 第34著者 所属(和/英) |
(略称: )
(略称: ) |
| 第35著者 氏名(和/英/ヨミ) |
/ / |
| 第35著者 所属(和/英) |
(略称: )
(略称: ) |
| 第36著者 氏名(和/英/ヨミ) |
/ / |
| 第36著者 所属(和/英) |
(略称: )
(略称: ) |
| 講演者 |
第1著者 |
| 発表日時 |
2023-05-19 09:20:00 |
| 発表時間 |
15分 |
| 申込先研究会 |
PRMU |
| 資料番号 |
PRMU2023-7 |
| 巻番号(vol) |
vol.123 |
| 号番号(no) |
no.30 |
| ページ範囲 |
pp.33-38 |
| ページ数 |
6 |
| 発行日 |
2023-05-11 (PRMU) |