计算机应用研究

北大核心,JST,Pж(AJ),CSCD扩展版,WJCI

国内刊号:51-1196/TP

国际刊号:1001-3695

计算机应用研究杂志2024年第5期:结合细粒度自注意力的实例图像着色

发布日期:

作者:刘航,普园媛,王成超,赵征鹏,朱朋杰,徐丹,

单位:1.云南大学信息学院,昆明650504;2.云南省高校物联网技术及应用重点实验室,昆明650504;

关键词:图像着色,细粒度注意力机制,冗余色斑,着色暗淡,颜色偏差,

基金:国家自然科学基金资助项目(61761046);云南省科技厅应用基础研究计划重点项目(202001BB050043);;

尽管基于深度学习的图像着色方法已取得显著效果,但仍存在冗余色斑、着色暗淡和颜色偏差三个问题。为此,提出了一种结合细粒度自注意力(fine-grain self-attention,FGSA)的实例图像着色方法。具体地,首先将提取的特征图分为颜色和空间位置,并结合两者拟合提高颜色和图像空间位置的对应关系,以缓解冗余色斑;其次,受光学摄影HDR原理的启发,利用感受野小的卷积核增强或抑制图像的颜色特征,并结合softmax对特征进行动态映射,从而提高对比度,缓解着色暗淡的问题;最后,组合不同的非线性基函数,增加网络对非线性颜色的表达,拟合出最接近真实图像的颜色分布,以解决颜色偏差。大量的实验结果表明,该方法在实例图像着色中取得了良好的效果。特别地,与当前较优的着色方法相比,该方法在特征感知评价指标LPIPS和FID上分别降低了4.1%和7.9%。

来源:2024年第5期

《计算机应用研究》期刊编辑部

查看计算机应用研究杂志2024年第5期

联系我们

  • 地址:四川省成都市武候区成科西路3号
  • 电话:028-85249567
  • E-mail:journal@arocmag.cn

咨询工作人员