科创中国

行业领域

电子信息技术

需求背景

1.系统可以对可见光摄像机以及红外热像仪进行实时视频显示，主要是为了能够更好的配合遥控以及自动巡检功能，这样能够实现操作人员在后台对其进行巡视和监督，方便检测数据的详细记录；

2.本项目可以实时对机器人的内部状态信息进行有效的后台显示和监督，能够通过这些信息的反馈，及时了解到机器人的实际运行状态，不仅能够方便对机器人的巡检控制，而且能够通过电子地图上的位置显示，轻而易举的找到机器人的实际位置所在点；

3.机器人内部安装了5G 通信模块可与监控人员进行视频通信。当机器人在巡检过程，如果有紧急事件需求求助时，可以按下紧急按钮，系统会和后台管理人员进行双向视频语音通信后台管理人员能实时了解机器人的位置信息以及实时视频画面，根据情况做出合适的处置；

4.由感知层、传输层、应用层以及持久层组成。从巡检任务设置、机器人定时自动巡航、巡检过程中异常事件定位、图片抓拍、图片信息实时传输、手机端同步展示、异常事件跟踪处理、异常报警等全程自动化处理流程。通过中央信息处理模块连接视觉传感器等对抓取过程进行实时控制。减轻了巡检人员的工作强度，将异常事件抓拍、报警等工作都交由机器人自动处理完成。

需解决的主要技术难题

1.如何提高系统对可见光摄像机以及红外热像仪进行实时视频显示，改善配合遥控以及自动巡检功能的能力；

2.如何提高操作人员在后台对其进行巡视和监督的能力，方便检测数据的详细记录；

3.机器人内部安装了5G 通信模块可与监控人员进行视频通信，当机器人在巡检过程时，如何增加通信稳定性，使得在有紧急事件需求求助时，及时与后台管理人员进行联系。

期望实现的主要技术目标

1.对ros系统进行集成及二次开发，集成dark-net_ros框架、采用YOLOV5进行模型训练、集成机械臂模块、语音模块、并自主开发了机器人巡检及异常处理等功能模块；

2.是采用WinCE嵌入式对其实时全方位、多功能的操作，由C++面向对象来进行语言的开发编程，主要目的是能够负责导航的定位信息的采集以及处理；

3.异步数据流通讯：Topic； 传感器：Structure；处理器：NU3000；可视图法：V-Graph。

需求解析

解析单位：“科创中国”黑龙江产业振兴区域科技服务团（黑龙江省科学技术协会） 解析时间：2023-11-07

吴雪弘

黑龙江省科技创新协会

会长

综合评价

1.系统可以对可见光摄像机以及红外热像仪进行实时视频显示，主要是为了能够更好的配合遥控以及自动巡检功能，这样能够实现操作人员在后台对其进行巡视和监督，方便检测数据的详细记录； 2.本项目可以实时对机器人的内部状态信息进行有效的后台显示和监督，能够通过这些信息的反馈，及时了解到机器人的实际运行状态，不仅能够方便对机器人的巡检控制，而且能够通过电子地图上的位置显示，轻而易举的找到机器人的实际位置所在点。

查看更多>

处理进度