需求发布 成果发布 科创案例库 揭榜挂帅
技术路演 会议展览 科创联合体 项目申报
前沿动态 科技政策 院士开讲 青托工程
科技服务团 学术资源
试点城市(园区) 双创活动周
协作站点 学会服务
问题库 项目库 开源库
English
您所在的位置: 成果库 一种多模态图像分割方法

一种多模态图像分割方法

发布时间: 2023-10-07

来源: 科技服务团

基本信息

合作方式： 技术服务
成果类型： 发明专利
行业领域：
物理
成果介绍
本申请提供一种多模态图像分割方法，该方法包括：提取多模态图像的初始特征图；采用解剖诱导的区域解耦器对初始特征图的不同区域解耦，得到解耦边界特征图和解耦语义特征图；在每个解剖子区域结构内，采用边界辅助的区域内耦合器分别耦合解耦边界特征图和解耦语义特征图，得到具有互补信息的更新的边界特征图和更新的语义特征图；基于每个解剖子区域结构中的更新的语义特征图，在不同解剖子区域结构之间使用跨区域耦合器，以使不同子区域之间的特征互补学习，得到最终特征图；最终特征图作为解码器的输入，并通过多个反卷积块生成最终分割结果。该方案结合多模态之间信息互补的优势，建立有效的分割模型，可降低计算成本和提升模型分割能力。
成果亮点
一种多模态图像分割方法，其特征在于，所述方法包括： 提取多模态图像的初始特征图； 采用解剖诱导的区域解耦器对所述初始特征图的不同区域解耦，得到解耦边界特征图和解耦语义特征图； 在每个解剖子区域结构内，采用边界辅助的区域内耦合器分别耦合所述解耦边界特征图和所述解耦语义特征图，得到具有互补信息的更新的边界特征图和更新的语义特征图； 基于每个解剖子区域结构中的所述更新的语义特征图，在不同解剖子区域结构之间使用跨区域耦合器，以使不同子区域之间的特征互补学习，得到最终特征图； 所述最终特征图作为解码器的输入，并通过多个反卷积块生成最终分割结果。
团队介绍
中国科学院深圳先进技术研究院提升了粤港地区及我国先进制造业和现代服务业的自主创新能力，推动我国自主知识产权新工业的建立，成为国际一流的工业研究院。 深圳先进院目前已初步构建了以科研为主的集科研、教育、产业、资本为一体的微型协同创新生态系统，由九个研究平台，国科大深圳先进技术学院，多个特色产业育成基地、多支产业发展基金、多个具有独立法人资质的新型专业科研机构等组成。开展先进技术研究，促进科技发展。信息、电子、通讯技术研究新材料、新能源技术研究高性能计算、自动化、精密机械研究生物医学与医疗仪器研究相关学历教育、博士后培养与学术交流。
成果资料
产业化落地方案
点击查看