| 講演抄録/キーワード |
| 講演名 |
2024-12-20 13:20
回帰特徴の再構成による物体姿勢の生成的推論 ○磯部 凌・川上 玲(Science Tokyo)・池畑 諭(Science Tokyo/NII)・佐藤育郎(Science Tokyo/デンソーアイティーラボラトリ) IBISML2024-40 |
| 抄録 |
(和) |
単画像からの正確な物体の姿勢推定は、自動運転や製造業において重要なタスクである。従来の研究の多くは機械学習ベースの姿勢回帰器を用いる手法をとるが、推論時に姿勢を反復的に更新する「合成による分析(analysis-by-synthesis)」アプローチをとる手法も存在する。3Dモデルが存在しない場合、後者のアプローチでは新規視点合成ネットワークが使用されるが、合成器により生成された画像は正確な姿勢推定に重要な特徴を欠いている可能性がある。
本研究では、学習済の姿勢回帰器の事前知識を活用し、画像合成器が生成する画像が姿勢推定に重要な特徴を含むような制約を課す、GIRRという手法を提案する。推論時には、合成器による損失と回帰器による損失を最小化するように物体の姿勢を最適化する。
実験では、ModelNet10-SO3およびShapeNetデータセットにおいて、GIRRが最先端の回機器単体の性能を上回る性能を発揮することを示す。 |
| (英) |
Accurate object pose estimation from a single image is an important task for autonomous driving and manufacturing. While most of previous studies use machine-learning based pose regressors, some employ an analysis-by-synthesis approach to iteratively update the pose during inference. Without 3D models, the latter approach can employ novel-view synthesis networks, but the images generated by the synthesizer may lack features essential for accurate pose estimation.
In this study, we propose GIRR: Generative Inference for object poses by Regressive-feature Reconstruction that leverages prior knowledge in a pre-trained pose regressor to guide the training of the novel-view synthesis network so that generated images contain features essential for pose estimation. At inference time, object pose is optimized with respect to the sequence of the image synthesizer and the pose regressor.
We demonstrate experimentally that our method outperforms existing high-performing regressors on ModelNet10-SO3 and ShapeNet. |
| キーワード |
(和) |
3次元物体姿勢推定 / 合成による分析 / 新規視点合成 / / / / / |
| (英) |
3d object pose estimation / analysis-by-synthesis / novel-view synthesis / / / / / |
| 文献情報 |
信学技報, vol. 124, no. 321, IBISML2024-40, pp. 62-69, 2024年12月. |
| 資料番号 |
IBISML2024-40 |
| 発行日 |
2024-12-13 (IBISML) |
| ISSN |
Online edition: ISSN 2432-6380 |
著作権に ついて |
技術研究報告に掲載された論文の著作権は電子情報通信学会に帰属します.(許諾番号:10GA0019/12GB0052/13GB0056/17GB0034/18GB0034) |
| PDFダウンロード |
IBISML2024-40 |