您所在的位置: 成果库 双目可聚焦系统及其应用

双目可聚焦系统及其应用

成果类型:: 实用新型专利

发布时间: 2021-10-25 15:02:25

科技成果产业化落地方案
方案提交机构:陕西省西咸新区| 宋莹 | 2022-11-04 10:14:23

运动目标的视觉信息受不可预测和控制因素影响,具有巨大的不确定性,如运动目标本身的视觉变化、复杂运动场景和视觉遮挡等。我们的研究目标集中在建立一种新的运动视觉计算模型,包括视觉任务学习、前期注意选择、协同运动分析、鲁棒信息融合、上下文意识学习等,发展更有效的运动目标跟踪和识别方法和计算工具,以突破智能视频监控、机器人和人机交互等的应用瓶颈。

人类视觉具有根据任务和场景,把视觉注意集中于有意义场景目标的能力,选择性和主动性是人类视觉信息处理的重要特征。机器人系统具有良好的运动能力,能够为机器人视觉系统实现外界信息获得的主动性和视觉信息处理的选择性提供有效的控制手段。通过算法编译赋予机器人视觉任务学习的场景感兴趣目标发现能力,通过多通道场景视频的视觉目标关联性计算,实现同一监控场景物体,在不同摄像机获取的视频图像序列中,其目标图像的视点和尺度不同,基于目标动作和视觉外观的多线索感知特征整合的target re-identification可以解决大场景图像微小目标的协同跟踪问题。以PTZ相机为核心主动目标选择聚焦视觉系统的物理实现。PTZ相机具有镜头变焦、变倍和全方位转动控制能力,它与固定摄像机的协同组合可解决远距离目标的清晰图像获取。因而,这种主动目标选择聚焦双摄像机系统具有PTZ相机和固定摄像机的各自优势,既保证对大场景的不间断监控,又可自动跟踪感兴趣目标。这种双摄像机系统可应用于视频监控,在自然场景下跟踪进入主视场的行人或车辆,并获取其高分辨率图像数据,为目标识别和取证等提供高质量图像信息。

PTZ相机具有镜头变焦、变倍和全方位转动控制能力,它与固定摄像机的协同组合可解决远距离目标的清晰图像获取。因而,这种主动目标选择聚焦双摄像机系统具有PTZ相机和固定摄像机的各自优势,既保证对大场景的不间断监控,又可自动跟踪感兴趣目标。这种双摄像机系统可应用于视频监控,在自然场景下跟踪进入主视场的行人或车辆,并获取其高分辨率图像数据,为目标识别和取证等提供高质量图像信息。

ATT双摄像机三大模块:

1.从图像样本学习视觉任务,在固定摄像机的监控场景图像主动发现兴趣目标;

2.视场耦合模块保证监控场景的显著目标图像坐标与PTZ相机控制参数关联;

***滤波时间对齐,PID控制调控PTZ相机跟踪感兴趣目标物体。

作为最具代表性的前端监控设备,监控摄像机的远距离控制、变倍、高清图像、预置位巡航、自动跟踪等功能在平安城市、交通、场馆、港口等项目/行业越来越发挥出重要的作用。随着安防等级的不断提升,再加上整个监控行业朝着数字化、网络化发展的进程,监控设备的智能化功能被更多地提上议事日程。而在此发展趋势下,自动跟踪成为了监控摄像机取得飞速发展的智能化技术之一。

ATT双摄像机可应用于监控场景的人员取证,解决大场景监控中目标面部区域的高清晰特写获取问题,使监控视频能作为有效证据,有利于协助取证破案。同时,解决多传感器协同对动态目标的指引跟踪问题,在航空航天以及军事领域中有重要应用。

在大场景环境中ATT双摄像机不仅通过双目,甚至多目执行全范围,多目标的监控、跟踪、抓取和报警等任务,并且通过有效融合多传感信息来精确导向追踪物体,使之能按照不同任务需求以不同方式接近目标。

负责人:刘跃虎

所在学院:西安交通大学电信学院

西安交通大学(Xi’an Jiaotong University),简称“西安交大”,位于陕西省西安市,是中华人民共和国教育部直属的综合性研究型全国重点大学,由教育部与国家国防科技工业局共建,国家“双一流”建设高校,首批进入国家“211工程”和“985工程”,国家“七五”“八五”重点建设高校,入选“珠峰计划”“强基计划”“2011计划”“111计划”、卓越工程师教育培养计划、卓越医生教育培养计划、卓越法律人才教育培养计划,是环太平洋大学联盟、九校联盟(C9) 、中国大学校长联谊会、全球能源互联网大学联盟、中俄综合性大学联盟 、中俄交通大学联盟、CDIO工程教育联盟、丝绸之路大学联盟成员高校,是中国人工智能教育联席会理事长单位、学位授权自主审核单位、中国三所开设少年班高校之一。

ATT双摄像机系统解决了大范围场景的固定摄像机监控视频由于目标物体距离摄像机过远,存在目标图像像素过少而导致视觉识别算法失效的问题。ATT双摄像机系统借鉴人类视觉感知的选择性注意机制(包括显式注意与隐式注意机制),将固定摄像机与PTZ摄像机结合,从感知前端或信息源头有效提高感兴趣目标分辨率。同时,实现了海量视频数据的快速非相关内容过滤和大范围场景目标的主动发现与跨摄像机协同跟踪。

ATT双摄像机系统特点:

1.双摄像机视场耦合不受PTZ内参变化影响;

2.场景和架设位置改变,无需重新标定;

3.通过图像样本学习实现视觉任务设定。

为促进科学技术产业化的发展,希望能够充分利用对方广泛的市场资源优势和科研平台能力,实现技术研发与市场营运的直接联盟。为使新技术尽快转化为生产力,希望实行技术合作开发联营生产和产值提成的方式紧密合作。希望合作方能够负责组建生产公司及工商、税务经营手续和必要的启动资金;在双方合作期间,我方对该产品不断创新和改进。

企业实施科技成果转移转化,采取以下方式并达到相应的目的:

一是开发新的产品或服务,以培育新的市场竞争力;

二是开发新的工艺,以提质、降本、降耗、增能、增效;

三是完善管理,优化流程,以强化对企业生产经营的控制力;

四是进入新的市场,以扩大市场规模;

五是培育新的能力,以取得新的优势;

六是完善经营管理的体制机制,以提高效益。

希望与企业、科学技术研究开发机构、高等学校和其他组织建立优势互补、分工明确、成果共享、风险共担的合作机制,按照市场机制联合组建研究开发平台、技术创新联盟、创新联合体等,协同推进研究开发与科技成果转化。