講演抄録/キーワード |
講演名 |
2022-12-15 10:30
Non-local operator及び周波数領域の特徴マップを用いた単一画像からの雨粒除去 ○江角真也・池原雅章(慶大) PRMU2022-34 |
抄録 |
(和) |
自動雨粒除去は見た目の良い画像を得るだけでなく,屋外画像の画像処理精度の向上にも有用である.従来法では広範囲での一貫性確保に失敗し不自然な模様がみられたことから,提案手法はNon-local operator を採用した.ここでは特徴マップ同士の積をとることによって離れた場所の特徴類似度を取り込んでいる.加えてエッジなどの高周波数成分をより精密に復元するため,周波数領域の特徴マップに対する処理を採用した.提案手法ではFFT によって周波数領域の特徴マップを生成,畳み込み層により処理を行った.以上により従来手法に比べ定量的により正確な雨粒除去を可能にしたほか,定性的にも処理画像の不自然な模様や細部の復元に対して改善がみられた. |
(英) |
High-quality raindrop removal is desired for outdoor image processing systems as well as for acquiring good-looking images. Existing methods often fail to keep global consistency and generate unnatural patterns. In this paper, we tackle this problem by introducing the non-local operator. The non-local operator combines features in distant locations with matrix multiplication and enables consistency in distant locations. In addition, we also propose to process feature maps in the frequency domain for more precise inpainting of high frequency components such as edges. Feature maps in the frequency domain are obtained by the FFT operation and processed by several convolution layers. Experimental results show that our method effectively removes raindrops and achieves state-of-the-art performance. |
キーワード |
(和) |
深層学習 / 画像修復 / 雨粒除去 / Non-local Neural Network / 高速フーリエ変換 / / / |
(英) |
Deep Learning / Image Restoration / Raindrop Removal / Non-local Neural Network / Fast Fourier Transform / / / |
文献情報 |
信学技報, vol. 122, no. 314, PRMU2022-34, pp. 13-18, 2022年12月. |
資料番号 |
PRMU2022-34 |
発行日 |
2022-12-08 (PRMU) |
ISSN |
Online edition: ISSN 2432-6380 |
著作権に ついて |
技術研究報告に掲載された論文の著作権は電子情報通信学会に帰属します.(許諾番号:10GA0019/12GB0052/13GB0056/17GB0034/18GB0034) |
PDFダウンロード |
PRMU2022-34 |