科创中国

本发明适用于人机交互领域，提供了一种人机交互命令的获取方法及系统，所述方法包括：获取视频图像；根据所述视频图像获取所述视频图像中的人脸位置信息和人手信息，所述人手信息包括：人手形状信息和人手位置信息；通过跟踪所述人手信息判断是否形成预定义的静止手势，如果判断形成所述预定义的静止手势，则根据所述人脸信息和所述人手信息，生成人脸和人手的位置关系；根据所述位置关系生成交互手势；根据所述交互手势获取对应的人机交互命令。本发明实施例，获取人脸位置信息和人手信息，通过上述信息获取对应的人机交互命令，由于人脸位置相对固定使得获取人机交互命令的方法简单方便。

一种人机交互命令获取方法，其特征在于，所述方法包括： 获取视频图像； 根据所述视频图像获取所述视频图像中的人脸位置信息和人手信息，所述人手信息包 括:人手形状信息和人手位置信息； 通过跟踪所述人手信息判断是否形成预定义的静止手势，如果判断形成所述预定义的 静止手势，则根据所述人脸信息和所述人手信息，生成人脸和人手的位置关系； 根据所述位置关系生成交互手势； 根据所述交互手势获取对应的人机交互命令； 所述根据所述视频图像获取所述视频图像中的人脸位置信息和人手信息的步骤包括： 确定人脸位置； 根据所述人脸位置确定人手的可移动区域； 在所述可移动区域获取所述人手信息； 所述在所述可移动区域获取所述人手信息的步骤包括： 预设第一时间阈值Ns，第二时间阈值Nns，所述第一时间阈值Ns小于第二时间阈值Nns; 判断当前图像帧是否需要进行全局检测，所述全局检测为:在所述可移动区域内检测 人手的位置和人手的所有形状； 当需要进行全局检测时，判断是否需要进行基于肤色信息的全局检测； 如果判断不需要进行基于肤色信息的全局检测，则在所述可移动区域对预定义的人手 形状进行检测获取所述人手信息;或者， 如果判

 随着摄像头成为移动终端、智能家电设备的标准配件，基于视觉知识的手势控制 技术在这些设备上的应用研究也发展的如火如荼，该项技术普及程度一方面取决于手势识 别算法的发展程度，如高效性以及响应正确率等，另一方面也取决于用户的体验效果，即， 与传统的交互方式相比是否真的具有更好的便利性。但是，当前的手势识别算法要么精度 不够，难以在现实环境下应用，要么是计算复杂度太高，需要运算能力强的处理器，这些都 妨碍手势识别技术的个人电子消费品上的应用推广。而且，许多手势识别算法的应用领域 还受到相当程度的限制，例如，利用运动手势来控制像手机、平板这些需要近距离操作的设 备，用户会觉得非常别扭。因此，如何设计让用户感觉到舒服便利愿意使用的手势，并且同 时保证识别系统运算的高效性和高响应率，依旧是手势识别应用研究领域的一项重要课 题。

中国科学院深圳先进技术研究院提升了粤港地区及我国先进制造业和现代服务业的自主创新能力，推动我国自主知识产权新工业的建立，成为国际一流的工业研究院。 深圳先进院目前已初步构建了以科研为主的集科研、教育、产业、资本为一体的微型协同创新生态系统，由九个研究平台，国科大深圳先进技术学院，多个特色产业育成基地、多支产业发展基金、多个具有独立法人资质的新型专业科研机构等组成。开展先进技术研究，促进科技发展。信息、电子、通讯技术研究新材料、新能源技术研究高性能计算、自动化、精密机械研究生物医学与医疗仪器研究相关学历教育、博士后培养与学术交流。

本发明实施例通过获取人脸位置信息和人手信息，生成人脸与人手的相对位置关 系，进而生成交互手势，并通过交互手势获取对应的人机交互命令，由于不涉及动态手势， 且人手相对于人脸的位置在一定范围内，使得相应的识别算法简单方便，又根据人脸与人 手的相对位置信息，可以生成多种人机交互命令，因此本发明实施例不仅获取人机交互命 令的方法简单方便，而且可方便获取多种不同的人机交互命令。

技术合作

以上所述实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述实 施例对本发明进行了详细的说明，本领域的普通技术人员应当理解:其依然可以对前述各 实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换;而这些修改 或者替换，并不使相应技术方案的本质脱离本发明实施例各实施例技术方案的精神和范 围。