您所在的位置: 成果库 元宇宙智能内容处理平台

元宇宙智能内容处理平台

成果类型:: 发明专利

发布时间: 2022-11-24 09:04:15

科技成果产业化落地方案
方案提交机构:“科创中国”人工智能专业科技服务团| 倪晶 | 2023-03-24 13:20:33
元宇宙智能内容处理平台通过AI助力多媒体内容处理,开发应用深度学习和强化学习神经网络框架及MMBF(multi-modal based framework)多媒体内容处理算法引擎,以人工智能实现多媒体内容处理为核心,支持包括但不限于智能视频剪辑、智能图文视频化等功能,赋能数字营销、智能搜索、文娱传媒、职业培训、元宇宙等行业领域,提供专业的产品服务及解决方案。具体如下: 1.智能视频剪辑: 利用多模态内容AI剪辑、信息AI提取等技术,建立多模态内容处理及CV+NLP特征增强模型,构建多模态视频剪辑引擎(支持语音、图像、视频等),实现长视频智能切片,按照不同知识点剪辑生成多个短视频,并自动添加短视频的标题、标签、字幕等信息,提升短视频剪辑效率80倍以上,极大提高视频资源的搜索准确率。 2.智能图文视频化: 利用深度学习技术对多媒体内容进行多维度的特征学习与提取,基于隐扩散模型实现根据文本生成图片,基于海量音乐数据训练音乐创作模型及音乐结构表示学习模型、生成不同音乐主题片段,构建图文视频化智能引擎。
1. 智能视频剪辑: 当前短视频行业高速发展,同时也对视频内容剪辑效率和质量提出了更高的要求。目前短视频需求量激增,而全国媒体行业视频总量约5亿分钟,存量长视频片源多、体量大,可通过对存量长视频进行有效剪辑增加短视频内容。但是视频剪辑目前还是依靠人工作业为主,视频剪辑工具操作门槛高,人才培育成本高,人工剪辑耗时费力。智能视频剪辑将视频剪辑普惠化、流程化,辅助创作者提高生产效率,智能批量处理大量长视频视频,全AI流程处理,一键生成若干个精华短视频,剪辑效率较人工处理提升80倍以上,极大缩短制作周期,确保更新频率。同时可支持每个精华短视频的智能关键词精准生成,保证画质清晰、剪辑节奏流畅、内容紧跟亮点。基于多模态的视频内容处理作为基础能力,具有高拓展性,应用范围广,可赋能数字营销、智能搜索,文娱传媒等场景等。 2. 智能图文视频化: 短视频已成为互联网的一大入口,不同场景对视频制作的效率和质量都有了更高的要求。但视频制作有一定的专业门槛,各行业的从业人员很难在需要的时候,正确的使用现有视频制作软件实现专业视频的制作需求。

根据中国计算机行业协会元宇宙产业专委会的预测,当前中国元宇宙上下游产业规模已达到300亿元,未来五年或将突破2000亿元。聚焦于会展领域,来自国际展览业协会(UFI)的调研数据也显示,超过60%的会展受访者表达了对于VR等元宇宙应用的兴趣。巨大的行业前景及用户兴趣度,也为品牌方入局元宇宙会展注入了强劲信心。 从相对完整的定义来说,线上虚拟展览是指以营造虚拟体验为主要目标,通过3D建模、虚拟现实、增强现实、数字孪生、多媒体动画、视频技术、社交技术等技术手段相结合,实现会展参与对象、会展空间、展台、展品、对接项目等展示对象的虚拟化、数字化,为展会观众营造身临其境的沉浸式展示环境。实际上,元宇宙会展是线下会展的一个衍生,给线下会展补充了线下所不能得到的体验。在中国数字化加速发展的当下,有关部门多次明确指出要积极打造线上展览展示新平台。因此,无论是从政策角度,还是从市场需求出发,元宇宙会展都会成为越来越多企业的一种新选择。 在疫情防控背景之下,元宇宙会展受到更多重视。随着科技进步,人们希望得到更多新鲜的体验以及希望展会更加方便,不必舟车劳顿参加一个展会等等。实际上,无论有没有疫情,元宇宙都是未来趋势,疫情只不过加速了数字化变革的过程。

团队由8名人工智能高级工程师及产品专家组成,概况如下: 团队成员舒畅英国布里斯托大学毕业,曾在日本国立情报研究所企业就职,曾获平安2021年十佳团队荣誉,致力于多模态融合解决方案的研究和知鸟短视频剪辑和生成落地应用,相关产品已在知鸟寿险和营销应用,获得相关国际竞赛第一和多篇国际论文发表成果,达到业内领先影响力。 团队成员郑喜民哈尔滨理工大学毕业,曾在国内专网通信龙头企业海能达就职,曾获平安2021年十佳团队荣誉,致力于虚拟人生成、驱动等全流程的解决方案的研究和图片/视频内容智能生成落地应用,相关产品已在知鸟、寿险等落地应用,获得多项国际顶会赛事第一名,并申请相关专利百余篇,具有一定业内领先影响力。 团队成员潘芸倩北京邮电大学毕业,曾在知名企业盛大网络就职,曾获平安科技首届微创新比赛第一名,多年致力于人工智能产品的战略规划及规划设计,相关产品落地应用于职业培训、数字营销、智能家居等领域,服务平安集团超百万的寿险代理人,并申请多篇相关专利。

1、缓解传统会展业盈利困境、增厚研发企业利润 受疫情影响,会展活动暂停、收入锐减、现金断流、成本支出增加。根据中国展览馆协会调查显示,估计年营收减少50%-100%的企业占33.4%;估计损失30-50%的企业占35.2%;估计损失小于30%的企业占18.5%。随着元宇宙内容基础设施建设,90%的会展主办机构尝试开拓数字化收入,基于影谱ADT Meta版引擎开发的“元宇宙数字空间”符合会展数字化顶层战略规划,稳步推进了会展行业数字化进程,于参展观众而言,数字化场馆丰富了场景体验,于主办方而言,数字化搭建提升了技术服务能力。利润率方面,于研发企业自身而言,“元宇宙数字空间”积极创新的商业模式,提高了数字化业务收入的占比,降低对纯展会面积/会议门票销售等传统收入的依赖。于研发企业自身而言,增加了一类创新性业务收入,预计增厚当年利润10%-30%。 2、于赞助商而言,数字化露出强化了品牌曝光效率 针对展位品牌方和赞助商,提供物理世界真实商品与元宇宙虚拟商品的全真映射服务,将商品孪生体进行数字资产化,建立品牌与消费者/观众之间的联系。用户可以在虚拟展馆中快速浏览选择商品,深度了解商品功能和属性,随时随地与千里之外的参展商进行“面对面”的实时语音动作沟通,促进商务洽谈带动商业化增长。 该解决方案系数字化赋能展会行业和数字商业的联动,预计产生的经济效益较传统产业呈倍数递增。以数字商业为例,于参展赞助品牌而言,数字化露出是数字商业的一种变形表现,据前瞻产业研究院预测,2025年我国数字商业核心产业链市场规模将达6188亿元,年均增速38.6%。展会行业的数字化露出系该产业链中下游环节,将成为继互联网零售之后,商业生态的新生形态和力量。

转化方式:自行投资实施转化 影谱科技“元宇宙数字空间”的基础底座(ADT引擎Meta版)及相关研发技术、专利知识产权等由企业自行开展科技成果转化。通过该方式实施科技成果转化,由影谱科技研发部门研发输出成果后,进行生产销售,获得市场回报。以影谱科技ADT引擎的科研成果转化为例,基于该引擎所产生的一站式解决方案(数字商业、数字文旅、数字展会、数字政务)、应客户需求自研的硬件设备、软件APP开发,均由通过该方式实施科技成果转化,直接生产软硬件核心部件,应用于国家重点工程。