计算机应用研究

作者：冯月华,魏若岩,朱晓庆,

单位：1.河北经贸大学管理科学与信息工程学院,石家庄050061；2.河北省跨境电商技术创新中心,石家庄050061；3.北京工业大学信息学部,北京100124；

关键词：情感识别,背景上下文,多标签分类,GRU,情感预测,

基金：国家自然科学基金资助项目(62103009)；河北省重点研发计划资助项目(17216108)；河北省自然基金资助项目(F2018207038)；河北省高等教育教学改革研究与实践项目(2022GJJG178)；河北省教育厅科研资助项目(QN2020186)；河北经贸大学重点研究项目(ZD20230001)；；

为解决基于视觉的情感识别无法捕捉人物所处环境和与周围人物互动对情感识别的影响、单一情感种类无法更丰富地描述人物情感、无法对未来情感进行合理预测的问题，提出了融合背景上下文特征的视觉情感识别与预测方法。该方法由融合背景上下文特征的情感识别模型（Context-ER）和基于GRU与Valence-Arousal连续情感维度的情感预测模型（GRU-mapVA）组成。Context-ER同时综合了面部表情、身体姿态和背景上下文（所处环境、与周围人物互动行为）特征，进行26种离散情感类别的多标签分类和3个连续情感维度的回归。GRU-mapVA根据所提映射规则，将Valence-Arousal的预测值投影到改进的Valence-Arousal模型上，使得情感预测类间差异更为明显。Context-ER在Emotic数据集上进行了测试，结果表明识别情感的平均精确率比现有方法提高4%以上；GRU-mapVA在三段视频样本上进行了测试，结果表明情感预测效果相较于现有方法有很大提升。

来源：2024年第5期

《计算机应用研究》期刊编辑部

查看计算机应用研究杂志2024年第5期