您所在的位置: 成果库 元宇宙智能内容处理平台

元宇宙智能内容处理平台

发布时间: 2022-11-24

来源: 科技服务团

基本信息

合作方式: 技术服务
成果类型: 发明专利
行业领域:
新一代信息技术产业,互联网与云计算、大数据服务,人工智能
成果介绍
元宇宙智能内容处理平台通过AI助力多媒体内容处理,开发应用深度学习和强化学习神经网络框架及MMBF(multi-modal based framework)多媒体内容处理算法引擎,以人工智能实现多媒体内容处理为核心,支持包括但不限于智能视频剪辑、智能图文视频化等功能,赋能数字营销、智能搜索、文娱传媒、职业培训、元宇宙等行业领域,提供专业的产品服务及解决方案。具体如下: 1.智能视频剪辑: 利用多模态内容AI剪辑、信息AI提取等技术,建立多模态内容处理及CV+NLP特征增强模型,构建多模态视频剪辑引擎(支持语音、图像、视频等),实现长视频智能切片,按照不同知识点剪辑生成多个短视频,并自动添加短视频的标题、标签、字幕等信息,提升短视频剪辑效率80倍以上,极大提高视频资源的搜索准确率。 2.智能图文视频化: 利用深度学习技术对多媒体内容进行多维度的特征学习与提取,基于隐扩散模型实现根据文本生成图片,基于海量音乐数据训练音乐创作模型及音乐结构表示学习模型、生成不同音乐主题片段,构建图文视频化智能引擎。
成果亮点
1. 智能视频剪辑: 当前短视频行业高速发展,同时也对视频内容剪辑效率和质量提出了更高的要求。目前短视频需求量激增,而全国媒体行业视频总量约5亿分钟,存量长视频片源多、体量大,可通过对存量长视频进行有效剪辑增加短视频内容。但是视频剪辑目前还是依靠人工作业为主,视频剪辑工具操作门槛高,人才培育成本高,人工剪辑耗时费力。智能视频剪辑将视频剪辑普惠化、流程化,辅助创作者提高生产效率,智能批量处理大量长视频视频,全AI流程处理,一键生成若干个精华短视频,剪辑效率较人工处理提升80倍以上,极大缩短制作周期,确保更新频率。同时可支持每个精华短视频的智能关键词精准生成,保证画质清晰、剪辑节奏流畅、内容紧跟亮点。基于多模态的视频内容处理作为基础能力,具有高拓展性,应用范围广,可赋能数字营销、智能搜索,文娱传媒等场景等。 2. 智能图文视频化: 短视频已成为互联网的一大入口,不同场景对视频制作的效率和质量都有了更高的要求。但视频制作有一定的专业门槛,各行业的从业人员很难在需要的时候,正确的使用现有视频制作软件实现专业视频的制作需求。
团队介绍
团队由8名人工智能高级工程师及产品专家组成,概况如下: 团队成员舒畅英国布里斯托大学毕业,曾在日本国立情报研究所企业就职,曾获平安2021年十佳团队荣誉,致力于多模态融合解决方案的研究和知鸟短视频剪辑和生成落地应用,相关产品已在知鸟寿险和营销应用,获得相关国际竞赛第一和多篇国际论文发表成果,达到业内领先影响力。 团队成员郑喜民哈尔滨理工大学毕业,曾在国内专网通信龙头企业海能达就职,曾获平安2021年十佳团队荣誉,致力于虚拟人生成、驱动等全流程的解决方案的研究和图片/视频内容智能生成落地应用,相关产品已在知鸟、寿险等落地应用,获得多项国际顶会赛事第一名,并申请相关专利百余篇,具有一定业内领先影响力。 团队成员潘芸倩北京邮电大学毕业,曾在知名企业盛大网络就职,曾获平安科技首届微创新比赛第一名,多年致力于人工智能产品的战略规划及规划设计,相关产品落地应用于职业培训、数字营销、智能家居等领域,服务平安集团超百万的寿险代理人,并申请多篇相关专利。
成果资料
产业化落地方案
点击查看
成果综合评价报告

评价单位:- (-) 评价时间:2023-04-24

张游

成都爱迪眼科医院

CEO 主任技师

综合评价

本技术能实现很好的社会效益, 建议推广。
查看更多>
更多