计算机应用研究

作者：张志远,杨关,刘小明,刘阳,

单位：1.中原工学院,郑州450007；2.河南省网络舆情监测与智能分析重点实验室,郑州450007；3.西安电子科技大学,西安710071；

关键词：广义零样本学习,解耦表征学习,变分自编码器,生成模型,特征融合,

基金：国家自然科学基金青年项目(61906141)；东北师范大学应用统计教育部重点实验室资助项目(135131007)；河南省高等学校重点科研项目(23A520022)；；

广义零样本学习通常利用在ImageNet上预训练的深度模型来提取相应的视觉特征，然而预训练模型提取到的视觉特征不可避免地包含和语义无关的信息，这将导致语义—视觉对齐的偏差以及对不可见类的负迁移，从而影响分类结果。为解决上述问题，提出了视觉特征对比解耦的广义零样本学习模型（visual feature contrast decoupling for generalized zero-shot learning，VFCD-GZSL），通过解耦出视觉特征中的语义相关表示来降低冗余信息对分类结果的影响。具体来说，首先用条件变分自编码器生成不可见类的视觉特征。然后通过解耦模块将视觉特征解耦语义相关和语义无关的潜层表示，同时添加总相关惩罚和对比损失来鼓励两者间的相互独立，并用语义关系匹配模型衡量其语义一致性，从而指导模型学习语义相关表示。最后使用特征细化模块细化后的特征和语义相关表示联合学习一个广义零样本学习分类器。在四个数据集上的实验均取得较优的结果，证实了所提方法的有效性。

来源：2023年第6期

《计算机应用研究》期刊编辑部

查看计算机应用研究杂志2023年第6期