由 dawei 副标题#e#
什么是MR?
如何区分增强现实、混合现实以及介导现实?VR是计算机生成的纯粹虚拟环境，AR简单地在裸眼现实中叠加虚拟画面，人可能无法直接用手势去与其互动，例如手机AR应用必须在手机上点触操作，而混合现实则在此基础上为人们提供了更方便地手势交互，比如微软Hololens，可以捕捉人的手部动作，用户可以直接用手点击叠加在现实物体上的虚拟界面。此外还有一个包含AR/VR和Mixed Reality的Mediated Reality(介导现实)的概念，它可以重新生成一个数字现实，现实中的任何物体不仅可以叠加虚拟画面，还可以被削减变形产生极大地改变。打个比方，VR是让你醒着做梦，AR是让你变个小魔术，那么混合现实乃至介导现实是则可以让你拥有“魔法”，只不过介导现实离我们还较远，我们目前只讨论混合现实。
VR/MR与多种技术的结合
我们知道HTC Vive是一款优秀的VR设备，它可以提供大范围位置追踪和体感还原，有不少爱好者们已经拿到了自己的Vive，但是戴上头盔自己闷头玩总会让围观的朋友感觉不能理解，于是大家钻研出了使用OBS加摄像头拍摄第三人称视角的MR混合现实游戏视频，使得真人影像融入到游戏世界中，看起来很酷炫，但这并不是真正的MR，只是带有MR演示效果地合成视频，但是这种合成视频却能很好地演示出人与虚拟物体进行立体交互的效果。
那么什么是真正的MR混合现实呢?真正的MR技术一定会运用到CV计算机视觉技术识别场景，譬如Slam技术，这是一种基于CV技术实时进行三维重建的技术，我们以微软HoloLens为例，HoloLens 拥有四台摄像头，左右两边各两台。通过对这四台摄像头的实时画面进行分析，得到一系列的深度图，再通过算法合成重建场景，其实原理和微软的Kinect类似，也就是说Hololens的摄像头模组可以看作是多个Kinect体感摄像头的组合，Kinect是通过发射和接收红外点阵识别场景中的人和物体，所以多个Kinect的组合可以捕捉不同角度的深度图，实时迭代，对不同深度图进行累积，计算出精确的房间以及房间内物体的三维模型。
所以Hololens带来的效果是让人难分虚实，因为当精确计算和重建房间后可以将虚拟模型和三维动画毫无痕迹地与实际场景结合起来，例如一面墙上突然开了个洞，洞里钻出了个机器人，会把你下一大跳。
Magic Leap的宣传片画面
不光是国外的巨头们在积极研究VR/MR和多种技术的结合应用，近期获悉深圳BeanVR团队也在他们即将上线的产品中加入了MR直播系统功能，如果能很好地应用在目前的娱乐直播行业，可以颠覆目前直播行业的运营模式，其MR直播系统应用原理是通过用不同位置摄像头记录画面，再用算法合成人物的立体影像单独抠出到虚拟场景中，实现Slam即实时扫描人物建模。此外，人工智能技术也被他们列为重点研究对象，目前也在尝试于产品中加入一个能够“读懂”你的人工智能助手。那么AI是怎样结合到VR中的呢?
VR与人工智能的结合
未来好的MR体验除了必须用到Slam技术，也肯定会和AI相结合，人工智能技术即AI可以帮助我们的机器也拥有像人一样的神经认知过程，逐渐形成一种记忆和习惯，设备会变得更智能，越来越懂你，举一个实际的应用例子，谷歌的人工智能AlphaGo以4比1成功战胜围棋高手李世石，除了让“阿法狗”名声大噪，也让科技界见识到了深度学习神经网络即DNN目前已取得的惊人成果。在人工智能领域，神经网络是一种模拟生物神经系统的模型，它更接近于人脑，能够模拟人脑来表达对数据的高度抽象。这样的技术也能运用到VR当中，例如手势识别，传统的手势识别的算法需要人工建立一个图像识别库，而深度学习能够赋予手势识别系统类比学习能力，能够非常有效地从大量有标签数据中深度提取数据的特征信息，大大提高手势识别的效率和准确率，所以跟你打交道的机器会越来越懂你。
未来当你和虚拟世界中的NPC人物交谈时，会让你感受不到它其实是由代码组成的，而是真的感觉在和一个有思想的人交谈。而且我们知道虚拟世界中人们应该不需要鼠标键盘这样会被淘汰的的人机交互工具了，人工智能技术能够很轻易的识别你的语言，把它翻译成一个指令，帮你在虚拟世界中完成各种事情，就像电影《钢铁侠》中的贾维斯一样智能。
VR/MR仍然会最先在社交应用上爆发
当下VR甚至MR应用的最多的还是游戏，因为包括HoloLens在内的应用市场中很大一部分都是游戏Demo，但是我们相信VR/MR一定会在社交应用中首先爆发，就像互联网和移动互联网社交应用的用户基数一定是比游戏用户基数要大，游戏并不是所有人生活的精神食粮，而且不同类型的游戏也拥有不同的受众。但是和远在天边的人随时“零距离”沟通一直是人们的愿望，除非你有社交恐惧症，随着科技发展，从电话到BB机到手机，从文字到图片到视频，人们在一点点缩小彼此沟通需要的成本，并不断改善体验。VR/MR技术会从沉浸感和距离感上再次颠覆人们的社交体验，但是为了实现真正的“零距离”，科技公司和创业团队们需要进行一场技术的军备竞赛，首先就是要从完全还原真实中的人的神态，动态到虚拟世界当中去。
以社交起家和闻名的世界性社交平台的Facebook公司在收购Oculus似乎就是在给我们一个暗示——VR/MR一定会成为下一代社交平台，所以花重金布局是值得的。
此前Facebook在F8大会上曝光的一段demo演示，画面中的虚拟透明人虽然没有表情，但是精准的手部和头部动作追踪以及无障碍的“面对面”语音交流让这两个虚拟人栩栩如生，加上两个人不断切换风景，用笔写写画画，最后还来了个自拍，让人感觉这应该就会是未来的社交应用起码该有的样子。
#p#副标题#e##p#分页标题#e#
尽管目前的真人捕捉和CG电影技术已经足够震撼，《魔兽》中吴彦祖饰演的古尔丹神态和气质兼备，但是由于没有眼球追踪，人物依然无法有很好的眼神，且真人演员需要穿戴巨麻烦的捕捉服装和设备，且庞大的数据量只能记录储存，无法做到低延迟低成本的实时传输，所以目前在虚拟场景中还原出人的Avatar仍然任重道远，且需要和深度学习这样的技术做结合才能更快实现。
国内的BeanVR团队紧追Facebook等巨头的方向和脚步，他们认为VR社交应该是从能够满足用户基本需求的轻型应用出发，而不是那种可以联机的大型网络游戏，首先是用户之间的交互和沟通，然后是即时分享机制，传统的是语音，打字，图片，视频，现在是用户面对面分享，或是像qq空间那样的博客产品也进化成别人来参观你装扮虚拟房间，里面有你的立体相册，每一张360照片代表的是你去过的地方，任何人都可以进入其中观看。
在BeanVR7月份做出的MR互动直播Demo的功能中，对于直播的主播方不需要传输很大的数据量，能给予观众很棒的立体视觉体验效果，并且能广泛运用，虽然如此，但视频不是模型，无法做到全方位观看。他们也会继续深耕计算机视觉，Slam技术，下一代VR/MR交互技术以实现更好的效果。