基于音视频识别及语义分析的智能约谈平台
发布时间: 2021-09-13
来源: 科技服务团
基本信息
本成果实现了在线约谈预约、人脸识别身份核验、语音实时转写、约谈问题智能引导提问、音视文同步显示、 汇报摘要自动生成、约谈报告自动生成、约谈文件回溯、约谈大数据分析等功能。成果目前处于样机阶段,其中陕西省委网信办智能约谈室正在装修中。
主要技术指标:
(1)线上、线下约谈:平台自主研发,支持国产软硬件环境,实现线上约谈、线下 固定式场景约谈、线下走读式场景约谈。
(2)约谈预约:系统提供线上约谈预约服务,预约选择约谈类型、约谈时间等。
(3)身份认证:约谈人通过身份证扫描和人脸识别对比核验身份。
(4)语音识别:平均正确识别率不低于 96%。
(5)说话人分离:识别角色错误率低于 10%、响应时间小于 1500ms。
(6)语音转写:转写速度高于 350 字 / 分、正确率高于 95%、响应时间小于 500ms。转写过程中过滤音频中的重复词、语气词、禁忌词。
(7) 音视文同步: 约谈内容实现音频、视频、文本(字幕) 同步显示, 字幕生成准 确度不低于 90%。
(8)约谈问题引导:约谈过程中系统自动生成约谈问题,供约谈人参考提问。
(9)约谈摘要自动生成:约谈结束后系统自动生成汇报摘要。
(10)约谈文件回溯:系统提供文字定位回听语音、回看视频功能。
(11)隐秘通信与存储:约谈过程采用隐秘通信技术,资料加密存储。
(12)约谈大数据分析:多维度约谈数据统计分析。
(13)约谈结束后自动生成约谈报告,响应速度 2 小时以内,内容准确度高于 95%。
相关成果:
(1)软件:研发 1 套面向国产软硬件环境的自主知识产权的智能约谈音视频识别及 语义分析平台。
(2)硬件:智能约谈主机、音视频一体机、阵列麦克风主板、定向麦克风、音频分 离器等。