成果介绍
本发明公开了一种基于GCN的深度无监督跨模态检索方法,涉及跨模态检索技术领域,包括以下步骤:S1:利用GCN搭建文本编码器,将特征相近的文本实例联系起来,丰富文本特征,S2:使用Hadamard乘积对原始的模内相似度矩阵进行增强,提出增强注意力融合机制对不同模态的语义相似度矩阵进行融合,针对不同的实例的文本和图像相似度有不同注意力。
成果亮点
本发明中,该机制能够随着数据集和样本的特征分布的改变而自适应地调整注意力;在三个公共数据集上的大量实验表明,所提出的DESAH方法可以学习更有效的哈希函数,以利于跨模态检索任务,并且基线方法相比,总体上显示了更高的检索精度。
团队介绍
重庆育成发展有限公司,成立于2013年,重庆高新开发建设投资集团成员,位于重庆市,是一家以从事软件和信息技术服务业为主的企业。 经营范围:为高新技术企业提供技术咨询、技术服务,科技项目的技术转让、技术咨询,技术进出口,从事投资业务(不得从事金融业务),企业形象设计,市场营销策划,房地产信息咨询,会议及展览服务,场地租赁,物业管理,企业管理咨询,从事与创新创业相关的投资业务及资产管理,设计、制作、代理、发布国内外广告(除依法须经批准的项目外,凭营业执照依法自主开展经营活动)重庆育成发展有限公司,成立于2013年,重庆高新开发建设投资集团成员,位于重庆市,是一家以从事软件和信息技术服务业为主的企业。 经营范围:为高新技术企业提供技术咨询、技术服务,科技项目的技术转让、技术咨询,技术进出口,从事投资业务(不得从事金融业务),企业形象设计,市场营销策划,房地产信息咨询,会议及展览服务,场地租赁,物业管理,企业管理咨询,从事与创新创业相关的投资业务及资产管理,设计、制作、代理、发布国内外广告(除依法须经批准的项目外,凭营业执照依法自主开展经营活动)
成果资料