您所在的位置: 成果库 一种基于图模型和注意力机制的视频摘要方法、装置、存储介质及设备

一种基于图模型和注意力机制的视频摘要方法、装置、存储介质及设备

成果类型:: 新技术

发布时间: 2023-10-25 17:50:21

科技成果产业化落地方案
方案提交机构:成果发布人| 闫妍 | 2023-10-25 17:50:22

本发明涉及一种基于图模型和注意力机制的视频摘要方法、装置、存储介质及设备,属于计算机视觉和深度学习技术领域。

本方法结合了图模型和注意力机制,通过以下技术亮点实现了视频摘要的自动化生成:1.图模型:利用图模型将视频中的帧视为节点,并建立帧之间的关联关系。这种方法能够捕捉到帧之间的时序信息和视觉相似性,从而更好地捕捉视频的整体内容。2.注意力机制:引入了注意力机制来确定帧的重要性。通过计算帧与当前摘要之间的相关性,赋予帧不同的权重,从而选择出重要的帧进行摘要。3.自动化生成:通过图模型和注意力机制的结合,实现了视频摘要的自动化生成,减少了人工干预和操作成本。

该方法可广泛应用于以下场景:

 

1.视频编辑:对于大量的视频内容,人工编辑和筛选摘要需要耗费大量时间和人力。本方法能够自动生成视频摘要,提高编辑效率。

2.短视频推荐:在短视频推荐领域,本方法可以帮助推荐系统自动提取视频的关键信息,从而更精准地为用户推荐感兴趣的内容。

3.视频监控:在视频监控领域,本方法可以帮助监控系统自动生成监控视频的摘要,方便快速浏览和检索。

4.新闻媒体:在新闻媒体领域,本方法可以帮助媒体机构自动化生成新闻视频摘要,提高新闻报道的效率和准确性。

干宗良 裴逸 陈昌红 崔子冠 刘峰南京邮电大学

本方法的应用能够带来以下效益:

 

1.提高效率:通过自动化生成视频摘要,大大提高了编辑和处理大量视频的效率。

2.降低成本:避免了人工筛选和编辑摘要的高昂成本,降低了运营成本。

3.提高准确性:通过机器自动化生成摘要,能够减少人为错误和遗漏,提高摘要的准确性。

4.满足个性化需求:可以针对不同的用户需求,自动生成个性化的视频摘要,提高用户体验。

1、自主生产:自行投资推动科技成果的实施转化。

2、合作生产:以科技成果作为合作条件,与他人共同实施转化。

3、转让专利权:向他人转让该科技成果。

4、技术入股:以该科技成果作价投资,折算股份或者出资比例。

5、授权许可:许可他人使用该科技成果。

6、其他合作转化方式:通过协商促成多方共同完成科技成果的转化。