国内刊号:11-5602/TP
国际刊号:1673-9418
发布日期:
作者:李明悦, 晏涛, 井花花, 刘渊
单位:1. 江南大学 人工智能与计算机学院,江苏 无锡 2141222. 江南大学 江苏省媒体设计与软件技术重点实验室,江苏 无锡 214122
关键词:光场图像(LFI),低照度图像增强,Transformer,4D卷积
光场图像(LFI)记录了目标场景丰富的三维结构和纹理等信息,在多种计算机视觉任务中拥有巨大优势。但是,低光照条件下采集的光场图像存在亮度低、噪声大等问题,降低了图像质量。提出了一种多尺度特征融合的低照度光场图像增强算法,引入数码单反相机(DSLR)图像来监督网络的训练以提升低照度光场图像的质量。为了充分挖掘和利用光场信息,通过角度和空间Transformer在不同尺度上对光场图像进行特征提取,捕获每个子孔径图像的互补信息以及局部和远程依赖关系。提出一个循环融合模块,利用长短时记忆网络保留不同尺度特征的长时记忆,同时通过局部和全局融合层自适应地聚合整个特征空间中的有用信息。设计了一个4D残差模块从聚合的特征重建目标光场子视图。此外,还构建了一个低照度LFI 和正常光照DSLR图像配对的数据集来训练所提出的网络。实验结果表明,所提网络能够有效地提升低照度光场图像的质量,相比其他算法拥有明显的优势。
来源:2023年第8期
《计算机科学与探索》期刊编辑部