您所在的位置: 成果库 紧致化视觉检索理论与关键技术

紧致化视觉检索理论与关键技术

成果类型:: 发明专利,软件著作权,著作权

发布时间: 2022-11-12 18:57:43

科技成果产业化落地方案
方案提交机构:成果发布人| 倪晶 | 2022-11-12 18:57:43

紧致化视觉检索是视觉大数据领域的核心问题之一。随着视觉大数据分析、高通量视觉计算、及视觉内容监控与过滤等实际应用的迫切需求,传统视觉检索系统的时空复杂性正面临着日益严重的挑战。本项目围绕上述问题和挑战,在国家自然科学基金等项目的支持下,历时近十年研究攻关,构建了紧致化视觉检索的基础理论框架与系列关键技术,突破了特征保真度和特征紧致化的关键瓶颈。本项目提出了认知驱动的图像特征点检测与描述方法,基于标签的视觉文本联合超图搜索方法,利用图像属性来辅助弱监督字典学习,构建了序列约束哈希算法,探究了图像边缘方向信息的编码方案。本项目所构建的面向视觉检索的紧致特征提取与编码方案,为视觉大数据的高效特征表示与内容理解提供了新的理论方法与技术途径,在智慧城市监控、网络内容分析等领域有广泛的应用价值。

1.针对视觉特征提取和描述问题,提出了认知驱动的图像特征点检测与描述的算法,实现了局部特征点的高效提取和紧致描述,在车辆再识别、医疗图像检索等应用中显著提升系统效率。2.针对海量视觉数据管理难题,建立了带噪视觉数据的弱监督词典学习理论,解决了图文信息混合的紧致化视觉建模难题,建立了弱监督词典学习新范式,在华为手机上实现高精度实时数据分析处理3针对高效视觉特征比对问题,研究排序信息敏感的紧致特征编码,建立了排序敏感性与特征紧致性之间的关系,显著降低了储存开销。

项目研发的紧致化视觉检索关键技术在腾讯、华为、嘀嘀、美亚柏科 等行业龙头企业进行了落地应用,合作开发的内容鉴别与过滤、身份核验、 舆情分析等产品,为企业创造了近十亿元的产值,并服务了上百个政府及 企业机构和数亿的国内外互联网用户。根据业务部门估计,该产品功能为 腾讯产生直接和间接产值达八千万元。

1 纪荣嵘 男 1983.01 教授 博士 厦门大学本项目总体规划,研发了基于学习的局部特征表达、基于序列保留的哈希、增量式特征索引等技术。2 高跃 男 1983.11 副教授 博士 清华大学研究了基于学习的局部特征表达、基于超图学习的图像检索、基于弱监督的视觉字典学习。3 张宝昌 男 1976.1 特聘研究员 博士 北京航空航天大学研究了带向性的二值特征编码、潜约束相关滤波器。4 姚鸿勋 女 1965.11 教授 博士 哈尔滨工业大学研究了基于学习的局部特征表达、基于视觉注意力模18型的特征表达。5 孙晓帅 男 1984.7 副教授 博士 厦门大学 研究了视觉注意力模型。6 黄飞跃 男 1979.7专家研究员 博士 腾讯科技(深圳)有限公司参与研究了无损的图片压缩方法。7 吴运声 男 1976.10 专家研究员 硕士 腾讯科技(深圳)有限公司参与研究了无损的图片压缩方法。8 许鹏飞 男 1982.10首席算法工程师博士北京嘀嘀无限科技发展有限公司研究了基于视觉感知的交通场景分析技术的应用。

自 2017 年相关技术部署后,企业相关产值 累计>3 亿元,系统应用单位数>358 个,预计未来累计产值将达到200 亿。

依托本项目技术,北京嘀嘀无限科技发展有限公司为用户提供智 能的租车、专车、顺风车等全面的出行服务。公司致力于与不同社群 以及伙伴协作互补,运用大数据驱动的深度学习技术,解决全球出行、 环保、就业挑战;提升用户体验,创造社会价值,建设开放、高效、 可持续的移动出行新生态。腾讯优图团队的跨年龄人脸识别技术是优图团队的核心技术,包 括跨种族/跨年龄识别等。其中跨年龄人脸识别技术采用了由厦门大 学信息学院纪荣嵘教授团队和优图团队共同研发的跨年龄可解释人 脸识别算法。该算法通过模拟和预测人员外貌随年龄变化的趋势和跨 年龄人脸建模技术,在跨年龄识别任务中产生了显著突破,自上线以 来,协助公安破获多起拐卖儿童的案件,产生了重大的社会影响力。