面向数字警务的视频传输与可视化关键技术研究
成果类型:: 发明专利,软件著作权,著作权
发布时间: 2022-11-12 17:07:01
本项目利用TCP/UDP混合协议实现了无线网络环境下视音频数据的高质量传输,同时充分利用视频数据空间可伸缩特性,结合多维度用户播放环境信息(播放器终端、网络状态和用户互动操作指令)给用户提供最合适的视频数据,大大增强了用户体验。利用视频压缩域提供的编码块相关特征,快速得到视频的运动信息,实现视频深度图推理质量与推理速度的平衡。采用基于卷积神经网络、图像二维熵的自适应CU块划分方法,和基于小波变换的深度图帧内DMMs模式skip算法,可以降低深度图在帧内预测编码过程中的计算复杂度,在保证视频质量的前提下,极大减少3D视频编码的时间。
1.针对低带宽、异构网络环境下视频播放质量不佳的问题,提出了可伸缩视频编码快速层间预测选择算法、基于部分重建的可伸缩视频编码质量优化算法,以及基于空间可伸缩编码的交互式全景视频转码与播放技术,改善了终端用户视频播放体验。2.针对深度图像序列生成不够光滑问题,提出基于视频压缩域的深度图推理算法、基于深度图分割渲染的虚拟视点图像的生成技术,提升了深度图像质量,实现了警务视频的多层次多视角可视化。3. 针对3D-HEVC视频中帧内深度图编码算法复杂度高、计算耗时长的问题,提出了基于小波变换的深度建模模式选择算法 、基于图像二维熵的编码模块快速划分算法,及基于卷积神经网络的自适应编码模块输入方法,使得3D-HEVC编码能更好地在实际工程中得到广泛应用。
采用基于卷积神经网络、图像二维熵的自适应 CU 块划分方法,和基于小
波变换的深度图帧内 DMMs 模式 skip 算法,可以降低深度图在帧内预测编码
过程中的计算复杂度,在保证视频质量的前提下,极大减少 3D 视频编码的时
间。
马汉杰 男 1982.7 副教授 博士 杭州码全信息科技有限公司、浙江理工大学 主持与研究多个视频转码相关项目冯杰 男 1980.11 讲师 博士 浙江理工大学 深度图生成,虚拟视点合成张桦 女 1980.12 副教授 博士 杭州电子科技大学 3D-HEVC相关项目的研究黄爱爱 女 1982.11 讲师 博士 杭州电子科技大学 视频转码相关项目研究许永恩 男 1993.6 无 硕士 杭州码全信息科技有限公司 视频转码相关项目研究与实现董慧 女 1994.11 无 硕士 杭州码全信息科技有限公司 视频转码相关项目研究与实现胡学兵 男 1993.3 无 学士 杭州码全信息科技有限公司 视频转码相关项目后端开发吴鹏飞 男 1995.10 无 学士 杭州码全信息科技有限公司 视频转码相关项目前端开发陈子豪 男 1994.3 无 学士 杭州码全信息科技有限公司 视频转码相关项目交互设计
基于以上视频可伸缩编码、视频深度图生成和 3D HEVC 快速视频编码等关
键技术研究,本项目将相关成果应用于智慧警务领域。通过接处警、警务通 APP、
卡口巡检、人车预警、远程音视频指挥等功能,为警务工作中的监控与视频通话
等功能实时提供高清视频流,保障了预警、实时指挥联动等工作。该成果具有
广泛的应用前景,近年来已实现销售额 4657 万元。
浙江省重点科技创新团队子项目,2011R50009-4,三维视频编码及传输关键
技术研究和系统示范
浙江省自然科学基金,Y1100803,自适应视频编码质量控制技术研究
国家自然科学基金面上项目,61471150,表面不规则场景的光场非均匀采集
方法研究
国家自然科学基金委员会,青年科学基金项目,61501402,基于人类 3D 视
觉感应的 2D 到 3D 视频转换关键技术研究
浙江省自然科学基金,面上项目,Y1100632、基于 H.264 压缩域视频分割与
特征提取技术研究