基于寒武纪MLU220的目标检测软件

发布时间: 2024-12-19

基本信息

合作方式：委托开发

成果类型：著作权,新技术

行业领域：

新一代信息技术

成果介绍

该项目主要包括以下四个功能，1、基于需求单位提供的车载多传感器套件构建地面环境感知数据集；2、构建跨域感知数据集；3、数据集SDK； 4、基于多传感器数据集，实现地面目标检测。地面感知数据集收集了真实世界中不同场景不同天气下的环境数据，数据集由经过校正和同步的可见光图像、红外图像、激光雷达扫描数据、高精度的GPS信息和IMU加速信息等多种模态的感知信息组成。数据融合的思路是将激光雷达点云、红外相机图像、毫米波雷达数据投影到可见光平面。通过使用 YOLOv5 和 PointRCNN 等深度学习算法进行目标检测。融合可见光图像、红外图像和激光雷达数据，提高检测效果。将软件移植到 NVIDIA Xavier 和寒武纪 MLU220 等嵌入式平台上。

成果亮点

成果亮点一：开发了能够在复杂环境下进行目标检测的软件，具有广泛的应用前景；成果亮点二：目标检测软件完成向国产计算平台（寒武纪MLU220）的移植，实现国产化的应用。

团队介绍

视觉计算创新团队现有固定研究人员17人，合作研究人员11人，其中高级职称10人，博士16人。负责人谢剑斌博士，教授，新加坡国立大学访问学者，中国生物特征识别国家标准组专家，全国安防标委会委员，主持和参加无人系统、反卫、反恐、反谍、反台独、载人航天、平安城市、天网工程、智慧城市等国家重大项目。视觉计算创新团队专注于视觉仿生、视觉机器学习、视觉大数据、生物特征识别等视觉计算理论，面向边境防控、反恐预警、反谍保密和公共安全，研究视觉元数据、海量视频搜索、仿生高清摄像、目标检测跟踪、人体静脉识别、监控人脸识别和异常行为识别等世界前沿难题，为国防要地、政府机关、金融场所等提供特别可靠的身份识别和安全预警方法。视觉计算创新团队主持国家自然科学基金、国家发改委产学研、国家863、国家标准、国防预研、公安部创新计划、经信委创新计划等78项课题，其中国家级9项、部委级28项、横向课题41项。与产业化单位合作，研制成功中国第一套“多模高清视频信号发生仪”、“智能票据鉴别仪”、“静脉身份认证平台”、“无人哨岗”、“无人门禁”、“无人监考”、“无人分拣”、“无人前台”

成果资料