科创中国

电子信息技术

一种基于 深度学习 获取图像城市范围内 位置 及 姿态 的方法，涉及图像地理位置识别和 增强现实 领域。包括如下步骤：1)创建城市图片集；2)对城市图片集训练混合高斯模型，用训练出的混合高斯模型划分城市地理区域；3)训练联合学习图片姿态估计和场景识别神经网络；4)初始化，上传用户的GPS或者网络粗略位置信息；5)使用学习的划分函数对粗略的位置信息进行划分，下载对应网络模型和需要展示的 渲染 资料到用户端；6)采集用户输入相机 视频流 ，运用下载的当前区域的网络模型预测当前时刻的三个层面的 定位 结果，若网络输出的预测结果 置信度 高于 阈值 ，则使用预测的位置和姿态参数进行渲染资料的渲染。

本发明的目的在于提供一种基于深度学习获取图像城市范围内位置及姿态的方法。 本发明包括如下步骤： 1)创建城市图片集； 2)对城市图片集训练混合高斯模型，用训练出的混合高斯模型划分城市地理区域； 3)训练联合学习图片姿态估计和场景识别神经网络； 4)初始化，上传用户的GPS或者网络粗略位置信息； 5)使用学习的划分函数对粗略的位置信息进行划分，下载对应网络模型和需要展示的渲染资料到用户端； 6)采集用户输入相机视频流，运用下载的当前区域的网络模型预测当前时刻的三个层面的定位结果，若网络输出的预测结果置信度高于阈值，则使用预测的位置和姿态参数进行渲染资料的渲染。

厦门大学媒体分析与计算实验室由纪荣嵘教授（国家杰青获得者）创建，长期致力于计算机视觉及多媒体领域得理论与技术研究。近期，实验室还成功获批了福建省发改委设立的“福建省可信人工智能分析与应用工程研究中心”。实验室现有国家杰青1人，福建省杰青1人，正教授2人、副教授4人，助理教授3人，高级工程师2人，博士后2人，博士11人，硕士46人。近年来，实验室共发表JCR一区论文十余篇、ACM汇刊与IEEE汇刊四十余篇、中国计算机学会推荐A类国际会议长文八十余篇。在与本项目相关研究方向上，先后在PAMI、IJCV 等国际一流期刊和ICCV、CVPR等国际一流会议上发表论文。先后承担国家重点研发专项，基金委联合重点基金，中央军委科技委项目，腾讯、华为、滴滴等校企合作项目十余项，累计到账经费三千余万。此外，实验室已初步建设了一批具有国际水平的软、硬件实验平台，包括四十余台高性能服务器、数百TB的存储设备、GPU集群服务器和云计算平台。实验室与广东省深圳市鹏城实验室长期合作，瞄准新一轮人工智能创新驱动发展需要，面向粤港澳与闽西南进行AI产业赋能。