科创中国

新一代信息技术产业,人工智能

情感计算是人机交互领域近年来的热点话题，当前相关领域基于面部表情和语音模态的研究占多数，基于人体姿态的研究相对较少。在很多大尺度场景中，用户的动作姿态也是表达感情的重要载体，目前尚没有得到充分的利用。以用户动作姿态为基础的情感计算研究，在智能家居、智能宠物等领域都有研究转化为产品的落地空间。

本专利提出了一种基于姿态的新型情感计算方法，利用虚拟现实设备来采集用户的非表演动作数据，重新定义了19个人体运动关键点，构造了能够更加完善地描述肢体运动的80维特征列表。在融合神经网络模型的基础上，提出了双向循环门控单元融合神经网络模型，情感分类准确率比现有模型有所提升。

付心仪博士于2018年在清华大学美术学院获设计学博士学位，2012年于清华大学计算机科学技术系获学士学位。她曾是清华大学美术学院博士后(2018-2022)，现任清华大学未来实验室助理研究员。她的主要研究方向是自然人机交互、情感计算、文化遗产数字化等。 她负责或参与多项国家级或企业联合研究课题，例如：5G+AR、VR技术的科幻产业高质量发展路径研究（北京市发展和改革委员会项目)、面向未来个性化人居的智慧空间建构及设计研究（丰田联合研究基金）、丝路文物数字化快捷采集方法及面向极端复杂环境的装备研发（国家重点研发计划）、VR内容的生成与设计（国家重点研发计划）、人居场景下的多模态情感计算理论与方法研究（清华大学自主科研计划）、实体交互教育认知工具的设计理论与方法研究（清华大学自主科研计划）、雕塑、壁画类文化遗产的虚拟复原 (国家重点基础研究发展计划-973计划)、基于知识学习的文物色彩复原数字化理论与方法研究 (国家自然科学基金面上项目)、基于图像的数字化动漫造型理论与方法研究 (国家自然科学基金面上项目)、虚拟现实购物的交互设计研究（清华大学-阿里巴巴自然交互体验联合实验室项目）等。

点击查看