科创中国

行业领域

电子信息技术

需求背景

随着科技与经济的发展，全世界各个地区的文化交流趋于紧密，人们对于艺术方面的追求与创作也呈现多元化的趋势。而虛拟与增强现实技术在稳步发展的同时正渗透于各个领域，为涂鸦艺术的发展与推广提供了一条新的途径。为此我们基于虚拟现实的全息涂鸦互动系统进行设计与实现，激发艺术爱好者在虚拟系统中进行创作的热情，促进文化交流与艺术思维的碰撞。

需解决的主要技术难题

系统开发基于Windows10+***+KinectSDk技术，主要引擎采用Unity3D，首先将3DStudioMax制作好的模型添加到虚拟场景中，搭建一个适用于虚拟涂鸦的较为合理的场景布局。为更真实地模拟现实场景中的天气、光线等自然环境因素对景观的影响，在虚拟场景中添加Skybox 和不同种类光源。在场景布局的初步完成后，便进入代码编写阶段，通过编写C#脚本代码来实现用户与虚拟场景的交互，其中包括菜单选择、移动和主要功能涂鸦创作。系统是由涂鸦和互动投影相融合的互动立体式培育游戏，支持自定义绘画模型。

期望实现的主要技术目标

利用AR技术，采用即时视频动作捕捉技术、影像识别、压感传感器等交互技术，投影出一个虚拟现实互动界面，利用彩色学、图像处理、人工智能等将现场涂鸦绘画和互动展示融为一体，AR互动涂鸦，将扫描仪、触摸屏、平板电脑及手机结合，图像传到大屏后也可以实现触摸互动。适用于各类型电子设备随心画，把参与者带进一个虚拟和真实世界相结合的互动神奇世界。

处理进度