文档名：基于局部深度一致性的自监督手部姿态估计
摘要：基于深度图的3D手部姿态估计通常需要大量人工标注数据以达到高精确度和鲁棒性,然而关节点标注过程冗杂且存在一定误差.现有研究工作使用自监督方法解决对标注数据的依赖,通过在虚拟数据集上预训练网络,并在无标注的真实数据集上进行模型拟合,实现3D姿态估计.自监督方法的关键在于设计模型拟合的能量函数以减小模型在真实数据集上的精度下降程度.为了减小模型拟合难度,本文提出局部深度一致性损失,依据初始姿态估计结果,提取输入与输出深度图的局部表征,将深度图显式地解耦为以关节点为中心的不同区域.通过有针对性地对不同关节点进行局部优化,减少虚拟与真实深度图之间的固有领域误差对网络学习的影响,增加训练的稳定性.本文方法在NYU数据集上相比基础方法平均关节点误差提升了21.9%.
作者：王敬宇 黄伟亭 刘聪 戚琦 孙海峰 廖建新 Author：WANGJing-yu HUANGWei-ting LIUCong QIQi SUNHai-feng LIAOJian-xin
作者单位：北京邮电大学网络与交换国家重点实验室,北京100876中国移动通信有限公司研究院,北京100053
刊名：电子学报 ISTICEIPKU
Journal：ActaElectronicaSinica
年，卷(期)：2023, 51(6)
分类号：TP391.4
关键词：自监督 手部姿态估计 局部一致性 深度图 深度学习
Keywords：self-supervised handposeestimation regionalconsistency depthimages deeplearning
机标分类号：TP391.41V249TN912.34
在线出版日期：2023年9月8日
基金项目：基于局部深度一致性的自监督手部姿态估计[
期刊论文] 电子学报--2023, 51(6)王敬宇 黄伟亭 刘聪 戚琦 孙海峰 廖建新基于深度图的3D手部姿态估计通常需要大量人工标注数据以达到高精确度和鲁棒性,然而关节点标注过程冗杂且存在一定误差.现有研究工作使用自监督方法解决对标注数据的依赖,通过在虚拟数据集上预训练网络,并在无标注的真实...参考文献和引证文献
参考文献
引证文献
本文读者也读过
相似文献
相关博文
基于局部深度一致性的自监督手部姿态估计 Self-Supervised Hand Pose Estimation with Regional Depth Correspondence
基于局部深度一致性的自监督手部姿态估计.pdf
- 文件大小:
- 2.09 MB
- 下载次数:
- 60
-
高速下载
|
|
