科创中国
高低层特征融合的注意力遥感图像描述的生成方法及系统
发布时间: 2022-11-03
来源: 科技服务团
基本信息
合作方式：
技术许可
成果类型：
新技术
行业领域：
新一代信息技术产业
成果介绍
一种高低层特征融合的注意力遥感图像描述的生成方法及系统，本发明提供的技术方案充分利用了图像浅层特征的局部细节信息和高层特征的全局语义信息，给予了传统的注意力机制全局和局部双意识，从而更准确理解图像所表达的语义内容，以及该语义内容与自然语言句子之间的相互关系，进而为遥感图像生成内容准确的自然语言句子描述。
成果亮点
针对遥感图像描述生成中特征表示全面的问题，提出高低层特征融合的注意力机制，能够为遥感图像生成内容准确的自然语言句子描述。针对全局信息缺失问题，提出图像浅层特征的局部细节信息和高层特征的全局语义信息融合的方式，给予了传统的注意力机制全局和局部双重意识。针对高低层特征融合的问题，仅通过采用一个分类网络便可以实现高低层特征融合的方式，不需要借助其他检测网络，节省计算开销和时间成本。
团队介绍
本成果的牵头单位为中国科学院空天信息研究院地理与赛博空间信息技术研究部。
成果资料
产业化落地方案
成果综合评价报告
评价单位：“科创中国”大数据与新一代信息技术产业科技服务团 (中国指挥与控制学会) 评价时间：2022-11-14
张俊文
中国指挥与控制学会
中国指挥与控制学会秘书长助理
综合评价
该成果技术覆盖面广，由上述本发明提供的技术方案可以看出，针对遥感图像的自然语言句子对，利用编解码结构和注意力机制进行建模，充分利用了图像浅层特征的局部细节信息和高层特征的全局语义信息，给予了传统的注意力机制全局和局部双意识，从而更准确理解图像所表达的语义内容，以及该语义内容与自然语言句子之间的相互关系，进而为遥感图像生成内容准确的自然语言句子描述。
总体而言，该项目技术思路方向好，未来市场空间大，有利于当前方向应用，转化成熟度很高，值得支持推广。建议强化相应产品开发，加大产业链开发力度。
查看更多>
微信公众号
下载app
Copyright © 2022 中国科学技术协会 版权所有 | 京ICP备16016202号-20
京公网安备 11010202008974号