| 講演抄録/キーワード |
| 講演名 |
2026-07-03 11:00
Depth Anything v2を使用したRGB, thermal 画像の位置合わせの評価と検討 ○松井悠真・田中宏喜(京都産大) ITS2026-1 |
| 抄録 |
(和) |
RGB 画像と Thermal 画像の位置合わせに対して、Depth Anything v2 による単眼深度推定と三次元再構成を利用した位置合わせを提案する。RGB・Thermal 双方から推定した深度とキャリブレーション情報を用いて幾何的な対応を求めることで、モダリティ差に頑健な位置合わせを実現する。MS2 データセット(昼・夜各 500 フレーム)を用いた評価では、相互情報量と勾配正規化相互相関の指標で従来法(ECC)を上回る性能が確認された一方、構造的類似度(G-SSIM)では ECC が優位であり、評価指標による性能の違いが示唆された。これにより、異モダリティ間の位置合わせにおいて、深度情報を介した幾何学的対応付けが有効であることが示される。 |
| (英) |
We propose a registration method for RGB and thermal images that leverages monocular depth estimation via Depth Anything v2 together with 3D reconstruction. By estimating depth from both the RGB and thermal modalities and establishing geometric correspondences using calibration information, the proposed method achieves alignment that is robust to modality differences. In an evaluation on the MS2 dataset (500 frames each for daytime and nighttime), the method outperformed the conventional approach (ECC) in terms of mutual information and gradient normalized cross-correlation, whereas ECC remained superior in structural similarity (G-SSIM), suggesting that performance differs depending on the evaluation metric. These results demonstrate that geometric correspondence mediated by depth information is effective for cross-modal image registration. |
| キーワード |
(和) |
画像処理 / 熱画像 / 距離推定 / / / / / |
| (英) |
image processing / Thermal image / depth estimation / / / / / |
| 文献情報 |
信学技報, vol. 126, no. 92, ITS2026-1, pp. 1-6, 2026年7月. |
| 資料番号 |
ITS2026-1 |
| 発行日 |
2026-06-26 (ITS) |
| ISSN |
Online edition: ISSN 2432-6380 |
著作権に ついて |
技術研究報告に掲載された論文の著作権は電子情報通信学会に帰属します.(許諾番号:10GA0019/12GB0052/13GB0056/17GB0034/18GB0034) |
| PDFダウンロード |
ITS2026-1 |