成果介绍
研究了交互开始前机器人对用户有没有交互意图的推断问题。模仿人类主动交互的对象选择方式,提出了一种基于双模信息分析的交互对象选择方法,实现了机器人主动感知并选择想要交互的对象,改变了传统机器人被动等待用户呼唤的方式。该方法抽象了人类选择交互对象的模型,采用视觉和激光两种模态信息,提出了一种基于仿人交互意图特征和随机森林回归模型的意图推断方法,设计了交互意图推断优先级规则,最终通过日常生活中多人场景下交互开始前的交互对象选择实验验证了所提方法的有效性。
成果亮点
基于双向长短时记忆网络和零样本学习的肢体交互意图理解 针对交互意图理解中的交互动作识别问题,提出了基于语义自动编码器的零样本动态手势识别方法。设计了具有肢体空域关系的骨骼连通向量作为模型输入,搭建了具有肢体运动时序分析能力的多层 BLSTM 网络,实现了对用户的肢体交互意图识别。进一步的,针对未见类别动作识别问题,基于手势特征和语义属性,建立语义自动编码器来学习从特征空间到语义空间的映射,通过匹配最相似的语义信息,从而使未训练过的动作得以有效识别;最后,通过实验验证了所提方法能够有效识别多类别场景的人机交互动作。申请国家发明专利2项,“行人运动轨迹预测方法、装置、电子设备及存储介质”、“行为决策方法、装置、电子设备及存储介质”取得专利申请受理通知书。研制了助老服务机器人系统样机,达到稳定运行阶段,实现室内场景下5类手势交互识别准确率不低于80%。
团队介绍
机器人与智能装备产业创新服务综合体创建于2018年,位于余姚机器人智谷小镇,2020年升级为省级综合体,是余姚市创建的创新链、人才链、资金链、产业链专业化服务平台,现由浙江大学机器人研究院下的浙江湾区机器人技术有限公司负责建设。
综合体目前建有机器人与智能装备产业创新中心,重点打造人才服务基地和智能制造服务基地,高质量建设创新创业孵化、科技金融服务、知识产权服务、科技成果交易服务、政企对接服务等五大专业性平台。
成果资料