成果介绍
本发明实施例公开了一种动态人手渲染方法、装置、电子设备及存储介质,所述方法包括:获取人手图像序列;通过基于姿态依赖的运动场分布,将所述人手图像在观察空间中的采样点从观察空间变换到标准空间下,得到标准空间中采样点的采样点坐标;根据所述标准空间中采样点的采样点坐标,在所述标准空间中学习基于身份依赖的神经辐射场,得到所述采样点的体积颜色和体积密度;对所述采样点的体积颜色和体积密度进行渲染,得到所述人手的渲染结果,所述渲染结果包括所述人手的渲染图像和/或所述人手的三维模型。本发明解决了相关技术存在的动态人手渲染结果不够逼真的问题。
成果亮点
权利要求
1.一种动态人手渲染方法,其特征在于,所述方法包括:
获取人手图像序列,所述人手图像序列包括多帧人手图像,各帧所述人手图像是针对人手进行不同视角的拍摄得到的;
通过基于姿态依赖的运动场分布,将所述人手图像在观察空间中的采样点从观察空间变换到标准空间下,得到标准空间中采样点的采样点坐标;
根据所述标准空间中采样点的采样点坐标,在所述标准空间中学习基于身份依赖的神经辐射场,得到所述采样点的体积颜色和体积密度;
对所述采样点的体积颜色和体积密度进行渲染,得到所述人手的渲染结果,所述渲染结果包括所述人手的渲染图像和/或所述人手的三维模型。
2.如权利要求1所述的方法,其特征在于,所述通过基于姿态依赖的运动场分布,将所述人手图像在观察空间中的采样点从观察空间变换到标准空间下,得到标准空间中采样点的采样点坐标,包括:
通过人手参数化模型对所述各帧人手图像的姿态和形状进行估计,得到所述各帧人手图像的姿态参数和形状参数;
在观察空间中通过所述姿态参数和形状参数的引导,学习得到基于姿态依赖的运动场分布;
团队介绍
中国科学院深圳先进技术研究院提升了粤港地区及我国先进制造业和现代服务业的自主创新能力,推动我国自主知识产权新工业的建立,成为国际一流的工业研究院。 深圳先进院目前已初步构建了以科研为主的集科研、教育、产业、资本为一体的微型协同创新生态系统,由九个研究平台,国科大深圳先进技术学院,多个特色产业育成基地、多支产业发展基金、多个具有独立法人资质的新型专业科研机构等组成。开展先进技术研究,促进科技发展。信息、电子、通讯技术研究新材料、新能源技术研究高性能计算、自动化、精密机械研究生物医学与医疗仪器研究相关学历教育、博士后培养与学术交流。
成果资料
产业化落地方案