科创中国

高端装备制造产业

专利涉及数字信号处理领域，具体涉及一种融合不同视觉任务的图像处理方法及装置、一种电子设备以及一种计算机可读存储介质。视觉任务是一类任务的集合，比较有代表性的任务是目标检测、分类、识别等。不同的视觉任务的关注点会有所不同，但是其本质都是研究如何让计算机看懂图像。专利提供了一种融合不同视觉任务的图像处理方法、装置、电子设备及介质。方法包括：根据待处理图像的视觉任务类型，提取出图像中针对视觉任务类型的先验知识；利用基础压缩模型对图像进行压缩，得到第一部分码流和残差数据；对残差数据进行预处理；根据先验知识调整预处理后的残差数据，得到目标残差数据，并利用残差压缩模型对目标残差数据进行压缩，得到第二部分码流；对第一部分码流和第二部分码流分别解码再相加，得到输出图像。

本方案中，通过一个先验知识来修改图像残差的分布，来实现调整码率分配的目的，给视觉任务关注的区域提供更高质量的编码，最终使得压缩后的图像在不额外消耗码字的情况下，在视觉任务中获得了更高的准确率。相较于现有技术，本申请提供的融合不同视觉任务的图像处理方法，根据待处理图像的视觉任务类型，提取出所述图像中针对所述视觉任务类型的先验知识；利用基础压缩模型对所述图像进行压缩，得到第一部分码流和残差数据；对所述残差数据进行预处理，得到预处理后的残差数据；根据所述先验知识调整所述预处理后的残差数据，得到目标残差数据，并利用残差压缩模型对所述目标残差数据进行压缩，得到第二部分码流；对所述第一部分码流和所述第二部分码流分别解码再相加，得到输出图像。本方案中，通过一个先验知识来修改图像残差的分布，来实现调整码率分配的目的，给视觉任务关注的区域提供更高质量的编码，最终使得压缩后的图像在不额外消耗码字的情况下，在视觉任务中获得了更高的准确率。

浙江大学机器人研究院（以下简称“研究院）是为了贯彻落实浙江省委省政府关于推进工业转型升级的战略部署，在余姚市的大力推动下，于2017年由浙江大学和余姚市合作共建的新型研发机构。 研究院面向科技前沿、面向经济发展主战场，将机器人、智能装备研发及产业化作为主要突破方向；立足余姚、服务浙江、面向全国。以“合作、创新、智能、引领”为理念，以体制机制创新为抓手，以科技研发、成果转化和人才培育为核心，着力构建技术-人才-产业深度融合的创新创业生态；努力建成为国内一流的机器人领域政、产、学、研、用深度融通的新高地。