文档名：基于局部异构聚合图卷积网络的跨模态行人重识别
摘要：由于构建全天候视频监控系统的需要,基于可见光与红外的跨模态行人重识别问题受到学术界的广泛关注.因为类内变化和类间差异的影响,可见光与红外行人重识别是一项具有挑战性的任务.现有的工作主要集中在可见光-红外图像转换或跨模态的全局共享特征学习,而身体部位的局部特征和这些特征之间的结构关系在很大程度上被忽略了.我们认为局部关键点之间的图结构关系在模态内与模态间的变化是相对稳定的,充分挖掘与表示这种结构信息有助于解决跨模态行人重识别问题.本文提出了一种基于局部异构聚合图卷积网络的跨模态行人重识别方法,采用关键点提取网络提取图像的局部关键点特征,并构建了一种新颖的图卷积网络建模人体各部位之间的结构关系.该网络通过图内卷积层表征局部特征的高阶结构关系信息,提取具有辨别力的局部特征.网络中的跨图卷积层使两个异构图结构之间可以传递差异性特征,有助于减弱模态差异的影响.针对异构图结构的图匹配问题,设计了一种跨模态排列损失以更好地测度图结构的距离.本文方法在主流跨模态数据集RegDB和SYSU-MM01上的mAP/Rank-1为80.78%/80.55%和67.92%/66.49%,比VDCM算法的Rank-1分数高出7.58%和1.87%.
作者：孙锐 张磊 余益衡 张旭东Author：SUNRui ZHANGLei YUYi-heng ZHANGXu-dong
作者单位：合肥工业大学计算机与信息学院,安徽合肥230601;工业安全与应急技术安徽省重点实验室,安徽合肥230009
刊名：电子学报 ISTICEIPKU
Journal：ActaElectronicaSinica
年，卷(期)：2023, 51(4)
分类号：TP391.41
关键词：行人重识别 跨模态 异构聚合 图卷积网络 关键点提取网络
机标分类号：TP391.41TN911.73O643
在线出版日期：2023年7月6日
基金项目：国家自然科学基金，国家自然科学基金，安徽省重点研发计划-科技强警专项项目基于局部异构聚合图卷积网络的跨模态行人重识别[
期刊论文] 电子学报--2023, 51(4)孙锐 张磊 余益衡 张旭东由于构建全天候视频监控系统的需要,基于可见光与红外的跨模态行人重识别问题受到学术界的广泛关注.因为类内变化和类间差异的影响,可见光与红外行人重识别是一项具有挑战性的任务.现有的工作主要集中在可见光-红外图像...参考文献和引证文献
参考文献
引证文献
本文读者也读过
相似文献
相关博文
基于局部异构聚合图卷积网络的跨模态行人重识别 Cross-Modality Person Re-identification Based on Locally Heterogeneous Polymerization Graph Convolutional Network
基于局部异构聚合图卷积网络的跨模态行人重识别.pdf
- 文件大小:
- 4.07 MB
- 下载次数:
- 60
-
高速下载
|
|
