成果介绍
本发明公开了一种基于时序图卷积网络的三维手臂姿态估计方法,首先构建三维手臂姿态数据集,并按一定比例划分为训练集和测试集;进一步地,构建人体手臂无向拓扑图,通过邻接矩阵对该图结构进行表达;基于不同通道应用不同权值矩阵的方式设计通道语义局部图卷积来提升图卷积表达能力;基于多头注意力机制,并不再局限于逐元素点积操作,设计自适应全局图卷积模块,增强对输入的自适应能力;进一步地,综合两个图卷积模块设计SAG模块,将其与基于时序卷积的VideoPose3d网络相结合,实现从单目RGB视频序列中的二维关节估计人体三维姿态信息,并优于主流模型。
成果亮点
本发明利用时序信息和手臂关节点之间的运动链关系构成的语义信息,构建基于时序图卷积网络的三维手臂姿态估计方法,解决了各关节点深度模糊的问题,减小了整体预测误差;也提高了人体手臂末端关节的推理准确率。
团队介绍
机器人与智能装备产业创新服务综合体创建于2018年,位于余姚机器人智谷小镇,2020年升级为省级综合体,是余姚市创建的创新链、人才链、资金链、产业链专业化服务平台,现由浙江大学机器人研究院下的浙江湾区机器人技术有限公司负责建设。
综合体目前建有机器人与智能装备产业创新中心,重点打造人才服务基地和智能制造服务基地,高质量建设创新创业孵化、科技金融服务、知识产权服务、科技成果交易服务、政企对接服务等五大专业性平台。
成果资料