科创中国

电子信息技术

本发明公开了一种基于语义的多姿势虚拟试衣系统和方法，该方法包括：步骤101，用户首先选择人体图像，目标衣服和需要试穿的人体姿势；步骤102，分别提取人体图像的语义信息，依据人体衣服语义，对目标衣服进行扭转变形，使之适应于用户人体图像的语义部分；步骤103，将变形后的衣服、人体语义表征、人体姿势表征送入条件式对抗生成网络，得到初始试衣结果；步骤104，采用由粗到细的两步图像合成方法，生成试衣结果时，在神经网络中间层采用语义条件空间归一化，保留衣服语义并和其它人体语义分离开来；训练时，将生成的语义标签作为输入，以此提升测试阶段模型对于语义变化的鲁棒性；步骤105，系统输出并显示用户指定目标衣服和姿势的虚拟试衣结果。本发明得到的一种基于语义的多姿势虚拟试衣系统和方法，能够适用于电子商务服装在线销售领域，多姿势虚拟试衣能够极大提升用户体验，实现海量、高效的虚拟试衣效果。

本发明提出的基于语义的多姿势虚拟试衣系统和方法，能够很好的克服目标衣服试穿不准确，试衣效果不匹配等问题，以人体姿势和衣服语义作为生成对抗网络的条件，能够实现多姿势的虚拟试衣技术，互相对抗训练的GAN网络能够很好的保证虚拟试衣生成的效果图。

浙江大学机器人研究院（以下简称“研究院）是为了贯彻落实浙江省委省政府关于推进工业转型升级的战略部署，在余姚市的大力推动下，于2017年由浙江大学和余姚市合作共建的新型研发机构。 研究院面向科技前沿、面向经济发展主战场，将机器人、智能装备研发及产业化作为主要突破方向；立足余姚、服务浙江、面向全国。以“合作、创新、智能、引领”为理念，以体制机制创新为抓手，以科技研发、成果转化和人才培育为核心，着力构建技术-人才-产业深度融合的创新创业生态；努力建成为国内一流的机器人领域政、产、学、研、用深度融通的新高地。