10.16451/j.cnki.issn1003-6059.202210004
基于语义伪标签和双重特征存储库的无监督跨模态行人重识别
现有的有监督可见光-近红外行人重识别方法需要大量人力资源去除手工标注数据,容易受到标注数据场景的限制,难以满足真实多变应用场景的泛化性.因此,文中提出基于语义伪标签和双重特征存储库的无监督跨模态行人重识别方法.首先,提出基于对比学习框架的预训练方法,利用可见光行人图像和其生成的辅助灰度图像进行训练.利用该预训练方法获取对颜色变化具有鲁棒性的语义特征提取网络.然后,使用DBSCAN(Density-Based Spatial Clustering of Applications with Noise)聚类方法生成语义伪标签.相比现有的伪标签生成方法,文中提出的语义伪标签在生成过程中充分利用跨模态数据之间的结构信息,减少跨模态数据颜色变化带来的模态差异.此外,文中还构建实例级困难样本特征存储库和中心级聚类特征存储库,充分利用困难样本特征和聚类特征,让模型对噪声伪标签具有更强的鲁棒性.在SYSU-MM01、RegDB两个跨模态数据集上的实验验证文中方法的有效性.
无监督跨模态行人重识别、语义伪标签、双重特征存储库、深度学习
35
TP391(计算技术、计算机技术)
国家自然科学基金;安徽省自然科学基金;安徽省重点研发计划-科技强警专项项目
2022-11-24(万方平台首次上网日期,不代表论文的发表时间)
共11页
904-914