国内刊号:51-1196/TP
国际刊号:1001-3695
发布日期:
作者:赵小明,谌自强,张石清,
单位:1.浙江理工大学计算机科学与技术学院,杭州310018;2.台州学院智能信息处理研究所,浙江台州318000;
关键词:多模态,抑郁症检测,特征重构,特征解耦,特征融合,
基金:国家自然科学基金资助项目(62276180);;
抑郁症是一种广泛而严重的心理健康障碍,需要早期检测以便进行有效的干预。因为跨模态之间存在的信息冗余和模态间的异质性,集成音频和文本模态的自动化抑郁症检测是一个具有挑战性但重要的问题,先前的研究通常未能充分地明确学习音频-文本模态的相互作用以用于抑郁症检测。为了解决这些问题,提出了基于跨模态特征重构与解耦网络的多模态抑郁症检测方法(CFRDN)。该方法以文本作为核心模态,引导模型重构音频特征用于跨模态特征解耦任务。该框架旨在从文本引导重构的音频特征中解离共享和私有特征,以供后续的多模态融合使用。在DAIC-WoZ和E-DAIC数据集上进行了充分的实验,结果显示所提方法在多模态抑郁症检测任务上优于现有技术。
来源:2025年第1期
《计算机应用研究》期刊编辑部