基于邻域像素注意力机制的光场深度估计方法

作     者：林曦 郭阳 赵永强 姚乃夫 Lin Xi;Guo Yang;Zhao Yongqiang;Yao Naifu

作者机构：西北工业大学自动化学院陕西西安710129 

出 版 物：《光学学报》 (Acta Optica Sinica)

年 卷 期：2023年第43卷第21期

页      码：217-228页

摘      要：通过发掘深度信息与子孔径图像邻域像素间的高度相关性,提出了一种基于邻域像素注意力机制的光场深度估计方法。首先根据光场图像的数据特性提出了一种邻域像素注意力机制,该注意力机制考虑了不同子孔径图像在同一邻域间的极几何关系,能够增强网络对遮挡像素的感知能力。其次基于注意力机制设计了一个光场子孔径图像序列特征提取模块,该模块通过三维卷积将相邻序列图像上的特征编码到特征图上,并通过注意力机制增强网络对光场图像极几何特征的学习能力。最后联合邻域像素注意力机制和特征提取模块设计了一个多分支的全卷积神经网络,该网络使用部分光场子孔径图像序列即可估计图像的深度特征。实验结果表明,所提方法在均方误差(MSE)和平均坏像素率(BP)指标上总体表现优于其他先进方法,同时得益于高效注意力机制的加入,与其他先进方法相比所提方法运行速度最快。

主 题 词：光场图像 深度估计 邻域像素 注意力机制 神经网络 

学科分类：1305[艺术学-设计学类] 13[艺术学] 08[工学] 081104[081104] 0804[工学-材料学] 081101[081101] 0811[工学-水利类] 

核心收录：

D　O　I：10.3788/AOS230786

馆 藏 号：203124326...