科创中国

行业领域

电子信息技术

需求背景

随着机器人控制技术和互联网技术的发展，利用网络远程控制机器人成为机器人远程控制的一种新方式。已研发出的机器人远程控制系统的控制端多为计算机。虽实现了对移动机器人远程控制，但是在控制端灵活性方面略显不足，因此，本项目进行基于Android平台的室外机器人控制软件的研发实现对室外机器人的远程控制，达到控制灵活性及连续性良好，控制体验出色的目的。

需解决的主要技术难题

1. 由感知层、传输层、应用层以及持久层组成。从巡检任务设置、机器人定时自动巡航、巡检过程中异常事件定位、图片抓拍、图片信息实时传输、手机端同步展示、异常事件跟踪处理、异常报警等全程自动化处理流程。通过中央信息处理模块连接视觉传感器等对抓取过程进行实时控制。减轻了巡检人员的工作强度，将异常事件抓拍、报警等工作都交由机器人自动处理完成；

2. 对ros系统进行集成及二次开发，集成dark-net_ros框架、采用YOLOV5进行模型训练、集成机械臂模块、语音模块、并自主开发了机器人巡检及异常处理等功能模块；

3. 通过USB实现通信，该部分是机器人系统的核心部分，实现了机器人的感知数据处理和运行控制，导航、定位、避障的算法运行和处理；

4. 是采用WinCE嵌入式对其实时全方位、多功能的操作，由C++面向对象来进行语言的开发编程，主要目的是能够负责导航的定位信息的采集以及处理等等。

期望实现的主要技术目标

1.系统可以对可见光摄像机以及红外热像仪进行实时视频显示，主要是为了能够更好的配合遥控以及自动巡检功能，这样能够实现操作人员在后台对其进行巡视和监督，方便检测数据的详细记录；

2.本项目可以实时对机器人的内部状态信息进行有效的后台显示和监督，能够通过这些信息的反馈，及时了解到机器人的实际运行状态，不仅能够方便对机器人的巡检控制，而且能够通过电子地图上的位置显示，轻而易举的找到机器人的实际位置所在点；

3.机器人内部安装了5G 通信模块可与监控人员进行视频通信。当机器人在巡检过程，如果有紧急事件需求求助时，可以按下紧急按钮，系统会和后台管理人员进行双向视频语音通信后台管理人员能实时了解机器人的位置信息以及实时视频画面，根据情况做出合适的处置。

处理进度