| 講演抄録/キーワード |
| 講演名 |
2026-03-17 15:50
マルチモーダル潜在空間を通じた少数視点合成のための予測的意味正規化 ○松浦史明・中溝雄斗・田邊 光・柳井啓司(電通大) IMQ2025-96 IE2025-173 MVE2025-103 |
| 抄録 |
(和) |
少数画像からの新規視点合成は、限られた方向から撮影された画像のみを用いた場合、意味的な一貫性のみに基づいて学習すると、視点依存のアーティファクトが発生することが多い。本研究では、マルチモーダル大規模言語モデルであるBLIP3-oを活用した、新たなNeRFフレームワークを提案する。未観測視点における粗いCLIP特徴量を取得し、それらをNeRFの学習に組み込む。具体的には、(1)入力各画像をCLIPエンコーダで特徴化し、(2)カメラ姿勢などの条件を含むテキストプロンプトによりBLIP3-oに目標未観測視点の意味特徴を予測させ、(3)予測特徴とNeRFがレンダリングした画像のCLIP特徴の類似度を損失として最適化する。さらにDietNeRF由来のレンダリング損失および意味一貫性損失を併用し、外部深度・拡散モデル・手作業の正則化に依存せずに未観測表面のもっともらしい外観の再構成を可能とする。各種データセットでの定性的評価により、提案手法は背面アーティファクトを効果的に抑制した再構成を達成した。さらに定量評価では,構造的・知覚的整合性の向上を確認した。また、アブレーション実験により、色の忠実性や学習の安定性に関する課題も明らかとなった。 |
| (英) |
(Not available yet) |
| キーワード |
(和) |
3次元再構成 / Neural Radiance Fields / マルチモーダル大規模言語モデル / / / / / |
| (英) |
/ / / / / / / |
| 文献情報 |
信学技報, vol. 125, no. 410, IE2025-173, pp. 424-429, 2026年3月. |
| 資料番号 |
IE2025-173 |
| 発行日 |
2026-03-09 (IMQ, IE, MVE) |
| ISSN |
Online edition: ISSN 2432-6380 |
著作権に ついて |
技術研究報告に掲載された論文の著作権は電子情報通信学会に帰属します.(許諾番号:10GA0019/12GB0052/13GB0056/17GB0034/18GB0034) |
| PDFダウンロード |
IMQ2025-96 IE2025-173 MVE2025-103 |
| 研究会情報 |
| 研究会 |
CQ MVE IMQ IE |
| 開催期間 |
2026-03-16 - 2026-03-18 |
| 開催地(和) |
沖縄産業支援センター |
| 開催地(英) |
Okinawa-Sangyoushien-Center |
| テーマ(和) |
五感に訴えるオンラインメディアとその評価,および一般 |
| テーマ(英) |
|
| 講演論文情報の詳細 |
| 申込み研究会 |
IE |
| 会議コード |
2026-03-CQ-MVE-IMQ-IE |
| 本文の言語 |
日本語(英語タイトルなし) |
| タイトル(和) |
マルチモーダル潜在空間を通じた少数視点合成のための予測的意味正規化 |
| サブタイトル(和) |
|
| タイトル(英) |
|
| サブタイトル(英) |
|
| キーワード(1)(和/英) |
3次元再構成 / |
| キーワード(2)(和/英) |
Neural Radiance Fields / |
| キーワード(3)(和/英) |
マルチモーダル大規模言語モデル / |
| キーワード(4)(和/英) |
/ |
| キーワード(5)(和/英) |
/ |
| キーワード(6)(和/英) |
/ |
| キーワード(7)(和/英) |
/ |
| キーワード(8)(和/英) |
/ |
| 第1著者 氏名(和/英/ヨミ) |
松浦 史明 / Fumiaki Matsuura / マツウラ フミアキ |
| 第1著者 所属(和/英) |
電気通信大学 (略称: 電通大)
The University of Electro-Communications (略称: UEC) |
| 第2著者 氏名(和/英/ヨミ) |
中溝 雄斗 / Yuto Nakamizo / ナカミゾ ユウト |
| 第2著者 所属(和/英) |
電気通信大学 (略称: 電通大)
The University of Electro-Communications (略称: UEC) |
| 第3著者 氏名(和/英/ヨミ) |
田邊 光 / Hikaru Tanabe / タナベ ヒカル |
| 第3著者 所属(和/英) |
電気通信大学 (略称: 電通大)
The University of Electro-Communications (略称: UEC) |
| 第4著者 氏名(和/英/ヨミ) |
柳井 啓司 / Keiji Yanai / ヤナイ ケイジ |
| 第4著者 所属(和/英) |
電気通信大学 (略称: 電通大)
The University of Electro-Communications (略称: UEC) |
| 第5著者 氏名(和/英/ヨミ) |
/ / |
| 第5著者 所属(和/英) |
(略称: )
(略称: ) |
| 第6著者 氏名(和/英/ヨミ) |
/ / |
| 第6著者 所属(和/英) |
(略称: )
(略称: ) |
| 第7著者 氏名(和/英/ヨミ) |
/ / |
| 第7著者 所属(和/英) |
(略称: )
(略称: ) |
| 第8著者 氏名(和/英/ヨミ) |
/ / |
| 第8著者 所属(和/英) |
(略称: )
(略称: ) |
| 第9著者 氏名(和/英/ヨミ) |
/ / |
| 第9著者 所属(和/英) |
(略称: )
(略称: ) |
| 第10著者 氏名(和/英/ヨミ) |
/ / |
| 第10著者 所属(和/英) |
(略称: )
(略称: ) |
| 第11著者 氏名(和/英/ヨミ) |
/ / |
| 第11著者 所属(和/英) |
(略称: )
(略称: ) |
| 第12著者 氏名(和/英/ヨミ) |
/ / |
| 第12著者 所属(和/英) |
(略称: )
(略称: ) |
| 第13著者 氏名(和/英/ヨミ) |
/ / |
| 第13著者 所属(和/英) |
(略称: )
(略称: ) |
| 第14著者 氏名(和/英/ヨミ) |
/ / |
| 第14著者 所属(和/英) |
(略称: )
(略称: ) |
| 第15著者 氏名(和/英/ヨミ) |
/ / |
| 第15著者 所属(和/英) |
(略称: )
(略称: ) |
| 第16著者 氏名(和/英/ヨミ) |
/ / |
| 第16著者 所属(和/英) |
(略称: )
(略称: ) |
| 第17著者 氏名(和/英/ヨミ) |
/ / |
| 第17著者 所属(和/英) |
(略称: )
(略称: ) |
| 第18著者 氏名(和/英/ヨミ) |
/ / |
| 第18著者 所属(和/英) |
(略称: )
(略称: ) |
| 第19著者 氏名(和/英/ヨミ) |
/ / |
| 第19著者 所属(和/英) |
(略称: )
(略称: ) |
| 第20著者 氏名(和/英/ヨミ) |
/ / |
| 第20著者 所属(和/英) |
(略称: )
(略称: ) |
| 第21著者 氏名(和/英/ヨミ) |
/ / |
| 第21著者 所属(和/英) |
(略称: )
(略称: ) |
| 第22著者 氏名(和/英/ヨミ) |
/ / |
| 第22著者 所属(和/英) |
(略称: )
(略称: ) |
| 第23著者 氏名(和/英/ヨミ) |
/ / |
| 第23著者 所属(和/英) |
(略称: )
(略称: ) |
| 第24著者 氏名(和/英/ヨミ) |
/ / |
| 第24著者 所属(和/英) |
(略称: )
(略称: ) |
| 第25著者 氏名(和/英/ヨミ) |
/ / |
| 第25著者 所属(和/英) |
(略称: )
(略称: ) |
| 第26著者 氏名(和/英/ヨミ) |
/ / |
| 第26著者 所属(和/英) |
(略称: )
(略称: ) |
| 第27著者 氏名(和/英/ヨミ) |
/ / |
| 第27著者 所属(和/英) |
(略称: )
(略称: ) |
| 第28著者 氏名(和/英/ヨミ) |
/ / |
| 第28著者 所属(和/英) |
(略称: )
(略称: ) |
| 第29著者 氏名(和/英/ヨミ) |
/ / |
| 第29著者 所属(和/英) |
(略称: )
(略称: ) |
| 第30著者 氏名(和/英/ヨミ) |
/ / |
| 第30著者 所属(和/英) |
(略称: )
(略称: ) |
| 第31著者 氏名(和/英/ヨミ) |
/ / |
| 第31著者 所属(和/英) |
(略称: )
(略称: ) |
| 第32著者 氏名(和/英/ヨミ) |
/ / |
| 第32著者 所属(和/英) |
(略称: )
(略称: ) |
| 第33著者 氏名(和/英/ヨミ) |
/ / |
| 第33著者 所属(和/英) |
(略称: )
(略称: ) |
| 第34著者 氏名(和/英/ヨミ) |
/ / |
| 第34著者 所属(和/英) |
(略称: )
(略称: ) |
| 第35著者 氏名(和/英/ヨミ) |
/ / |
| 第35著者 所属(和/英) |
(略称: )
(略称: ) |
| 第36著者 氏名(和/英/ヨミ) |
/ / |
| 第36著者 所属(和/英) |
(略称: )
(略称: ) |
| 講演者 |
第1著者 |
| 発表日時 |
2026-03-17 15:50:00 |
| 発表時間 |
20分 |
| 申込先研究会 |
IE |
| 資料番号 |
IMQ2025-96, IE2025-173, MVE2025-103 |
| 巻番号(vol) |
vol.125 |
| 号番号(no) |
no.408(IMQ), no.410(IE), no.411(MVE) |
| ページ範囲 |
pp.424-429 |
| ページ数 |
6 |
| 発行日 |
2026-03-09 (IMQ, IE, MVE) |