计算机应用研究

作者：王智贤,雷浩鹏,王明文,罗国亮,付懿睿,

单位：1.江西师范大学计算机信息工程学院,南昌330022；2.华东交通大学虚拟现实与交互技术研究院,南昌330013；

关键词：手绘草图检索,跨域图像转换,多特征提取,相似度融合,

基金：江西省自然科学基金面上项目(20224BAB202018)；国家自然科学基金资助项目(62266023,62462032)；江西省重点研发计划资助项目(20223BBE51039,20232BBE50020)；江西省杰出青年科学基金资助项目(20232ACB212007)；；

针对基于手绘草图的图像检索任务中存在草图缺乏纹理与色彩细节导致跨模态特征对齐困难，以及跨域转换过程信息丢失影响检索精度的问题，提出了一种面向手绘草图的多阶段跨域图像检索方法（MSCD）。该方法分为三个阶段:首先，采用生成模型将手绘草图转换为自然图像，补充视觉细节特征，降低草图与自然图像的风格差异；其次，针对手绘草图、生成图像与真实自然图像的多模态特性，设计多分支特征提取网络，充分捕捉各模态的结构与语义信息；最后，通过相似度加权融合策略综合草图与生成图像的互补信息，提升最终检索结果的准确性与多样性。在Sketchy Ext与TU-Berlin Ext两个公开数据集上的实验结果表明，MSCD的mAP和Prec@100指标较现有先进方法均取得了明显提升，证明了MSCD在草图检索任务中的有效性。

来源：2025年第12期

《计算机应用研究》期刊编辑部

查看计算机应用研究杂志2025年第12期