科创中国
基于单张照片的用户化身生成系统
成果类型：: 发明专利
发布时间: 2023-07-31 18:05:00
科技成果产业化落地方案
方案提交机构：“科创中国”绿色纺织产业科技服务团| 白江 | 2023-08-10 14:10:51
该系统使用机器视觉和深度学习技术，从单张照片中生成高质量三维人脸及全身模型，避免了采集多张照片或者使用特殊设备进行拍摄的繁琐过程，可以为虚拟现实、增强现实、服装电子商务等元宇宙应用程序提供高质量的用户化身模型，使用户可以在虚拟环境中体验更加沉浸式的交互体验。
该系统的工作流程如下：1. 人脸检测：首先对输入照片中的人脸进行检测和对齐，以确保后续处理的准确性和稳定性。2. 特征提取：使用深度学习模型对检测到的人脸进行特征提取，以捕捉面部的细节和纹理信息。3. 三维重建：将人脸的特征点与三维模型对齐，然后使用三维重建算法从二维图像中恢复出三维形状。采用多视角的几何重建和纹理映射，以生成高精度的三维人脸模型。4. 人体重建：用户输入身高体重，自动生成三维人体，与头面部模型自动衔接。5. 渲染与展示：将生成的三维模型进行渲染和展示，可以使用虚拟现实头戴式显示器、增强现实设备或者在普通计算机屏幕上展示。
人工智能 (AI) 在各个行业的应用正在彻底改变我们的工作和生活方式。人工智能技术产生重大影响的一个领域是在科技和时尚行业中使用人工智能生成的内容 (AIGC)。AIGC 技术已被用于自动化各种任务并提高设计和开发过程的效率。它能够生成高质量的图形和设计，从而减少对体力劳动的需求，并腾出时间来完成创意任务。AI 工具还可以分析大量数据并提供有助于为决策提供信息的见解。
钟跃崎：纺织学院副教授、博士生导师 。主要研究方向： 1.虚拟织物，服装及人体的三维建模与仿真； 2.基于物理建模的织物与服装的虚拟现实技术 3.基于NUI的人机交互方式 4.极相似纤维的自动鉴别。
目前该项目的研发以趋于完成，该项目主要用于本技术的应用1. 人脸检测：首先对输入照片中的人脸进行检测和对齐，以确保后续处理的准确性和稳定性。2. 特征提取：使用深度学习模型对检测到的人脸进行特征提取，以捕捉面部的细节和纹理信息。3. 三维重建：将人脸的特征点与三维模型对齐，然后使用三维重建算法从二维图像中恢复出三维形状。采用多视角的几何重建和纹理映射，以生成高精度的三维人脸模型。4. 人体重建：用户输入身高体重，自动生成三维人体，与头面部模型自动衔接。5. 渲染与展示：将生成的三维模型进行渲染和展示，可以使用虚拟现实头戴式显示器、增强现实设备或者在普通计算机屏幕上展示。和企业联合攻关后便可投入生产，产生效益。
可技术转让或联合研发发布新的科技成果。’
微信公众号
下载app
Copyright © 2022 中国科学技术协会 版权所有 | 京ICP备16016202号-20
京公网安备 11010202008974号