国内刊号:51-1196/TP
国际刊号:1001-3695
发布日期:
作者:张逸骋,井花花,晏涛,
单位:江南大学a.人工智能与计算机学院;b.江苏省媒体设计与软件技术重点实验室,江苏无锡214122;
关键词:光场图像,视图生成,透视变换,深度估计,宏像素图像,条件生成对抗网络,
基金:国家自然科学基金资助项目(61902151);;
光场图像新视图生成算法在视点内插和外插方面已经取得了良好的研究成果,但在视点位置平移和旋转一定角度情形下的透视视图生成仍然是一项具有挑战性的任务。针对上述问题,提出了一种基于条件生成对抗网络的光场图像透视视图生成算法LFIPTNet(light field image perspective transformation network),利用相机的位姿信息作为条件来引导条件生成对抗网络学习新视图的内容。提出了多个模块,充分利用相机位姿信息和光场宏像素图像(macro pixel image,MPI)记录空间信息、角度信息、深度信息来生成预测视图。提出的方法在构建的数据集上与最新的三种方法进行了比较,相比于性能第二的StereoMag模型,PSNR提高了7.77 dB,SSIM提高了0.35。消融实验部分对提出的模块进行了评估,验证了创新点的有效性。充分的实验结果表明LFIPTNet相比于现有算法,生成的预测视图更加准确。
来源:2023年第8期
《计算机应用研究》期刊编辑部