VR小工具盘点底层技术的革新，让VR有更大的落地空间

这些小工具涵盖购物、试装、视频剪辑、VR内容创作、空间设计等多个方面呀...





这些小工具涵盖购物、试装、视频剪辑、VR内容创作、空间设计等多个方面呀

正文共 3834 字 14 图；预计阅读时间 10 分钟

工欲善其事必先利其器，这是一个讲究效率的时代，对VR用户体验来说也是一样。不能带来好的用户体验的产品或应用，难道不是耍流氓么？所以，小编今天就特意为大家盘点下近期推出的，让用户体验更高效、让VR技术更亲切的一些便捷小工具 or 应用。

小伙伴们还记得，苹果在今年的WWDC大会上演示的AR Quick Look技术么——在AR环境中显示3D内容？好消息是，Shopify的用户目前已能试用苹果的AR Quick Look工具了。

近日，为了让消费者购物更便捷，网购电商巨头Shopify推出了一款基于iOS 12的WebAR购物工具。目前，运行iOS 12 Beta版本的iPhone和iPad用户可以通过Magnolia网店来体验该工具的相关功能，并通过iOS 12的AR Quick Look内容库来浏览不同的示例。

此外，借助该WebAR购物工具，消费者还可将USDZ文件格式（该格式已全面应用于苹果ARKit2.0）的3D模型，直接上传到Shopify网店。并通过Safari直接在AR中浏览，无需下载单独的应用程序，十分便利。

除了让消费者获得简单、轻松的购物体验外，本次推出的WebAR购物工具，也能给诸多零售商提供帮助，使其能够利用AR来升级自己的网店。大家知道，谷歌推出的VR180 Creator，可用于转换VR180视频，并且允许用户使用熟悉的，诸如AdobePremiere之类的视频编辑工具，从而简化了用户创作的过程。

而现在使创建过程更容易的新工具又被开发出来了。近日，工具开发商JapplisJ发布了照片编辑新工具“VRPhoto Converter”。其允许用户将VR180照片插入VR视频，以及将左、右两张图像组合在一起以创建并排照片，或组合一系列VR照片来创建VR幻灯片，还支持与谷歌VR180 Creator工具相同的投影过程。同样，也允许用户使用Adobe Premiere等软件，进行编辑。

此外，开发商Japplis称，VR Photo Converter在高图像质量和尺寸方面具有优势，同时其稳定的性质，意味着可以避免用户在体验时出现晕动症状。VR Photo Converter的设计考虑了联想幻影相机等VR180相机，但开发人员表示，用户可以使用GoogleCardboard Camera拍摄360度VR照片，然后使用VR PhotoConverter将其转换为VR180视频。近日，美国AR视频公司Octi成功完成750万美元的种子轮投资，所得资金将用于开发其应用程序。

据了解，目前市面上的大部分AR产品仍然是基于平面的，包括苹果的ARKit。即AR看到并进行增强的世界是2D的，而非3D。而用2D的方式去理解3D的现实世界，也导致AR无法识别物体或人体的的纵深，很难捕捉并理解人体及其动作，削弱了用户使用过程中的真实感。不过，Octi公司推出的首款与公司同名的应用程序《Octi》，则打破了这一次元壁。该应用兼容iOS设备，允许用户在AR中查看人体图像。得益于Octi公司专有的骨架映射和手势检测技术，智能手机仅仅依靠单目视觉，就能从场景中提取清晰的人体动作。

即在不需要添加额外传感器的前提下，《Octi》就能够让智能手机等低频设备辨别3D场景中的纵深，捕捉人体的动作，使AR效果得到优化。据悉，Octi公司目前已与NFL球员协会（NFLPA）达成战略合作，将3D AR技术运用到商业体育领域的市场营销中。具体来说，Octi公司将为NFLPA超过2000名的运动员创建商业AR头像，还允许粉丝们与这些形象互动，并进行视频创作。

正如Octi公司的CEO兼联合创始人Justin Fuisz在一份声明中所表示的：“Octi平台提供了一种全新的功能，以极简单的方式来增进人与人之间的互动和沟通。”Facebook AI Reaserch（FAIR）近期开源了一项可将2D RGB图像的所有人类像素（不像此前的一些技术只涉及零散关节，如手腕或肘部等），实时映射至3D模型的技术——DensePose。

该技术可以高效地计算2D RGB图像和人体三维表面模型之间的密集对应关系。其可在单个GPU上以每秒多帧的速度运行，并且能够同时处理数十，甚至数百人。

DensePose可分为两部分，一是DensePose COCO数据集，二是DensePose-RCNN。前者是一个包含了超过5万张图像的数据集，它的图像来自COCO，并经工作人员手动标记；而后者是新颖的深层网络架构，基于Detectron算法实现，并由Caffe2提供支持。和Detectron的Mask-RCNN系统一样，DensePose-RCNN采用了密集姿态估计的功能，并且引入了一个全卷积网络对像素进行分类。

此外，研究人员还介绍了团队在“修复”被遮挡部位的一些实验，即通过引入一个“教师”网络，DensePose-RCNN能无视服装等遮挡物，成功实现姿态估计和相关动作捕捉。

这项技术能帮助人们进一步理解二维与三维的关系，开启一条理解3D物理模型的新道路。而将该技术应用于AR、VR、人机交互等一系列现实场景的话，能给用户带来很大便利。例如，通过一张照片就可轻松试装，或者替换图片中朋友的衣服。Notch是一款实时视觉创作工具，集创建、合成、编辑、播放于一身，无需编码就能即时编辑视频特效、控制灯光、生成VR/AR。尤其擅长创建粒子效果、模拟流体等物理特性，空间感知和渲染能力都较高效。

该工具既可在头显中使用，也能在桌面上使用。对于VR体验来说，Notch支持相关用户（即使没有VR方面的经验）快速使用该工具，并实时创造出专业级的高质量成果。其通过单一工具，创建完整体验，让用户不必加载多个工具，不必导出，也不会遇到兼容性方面的任何问题。

让事情变得更简单，该技术可以很大程度地提升用户体验。微软在Build 2018上公布了一个名为《Microsoft Layout》的空间设计工具。该应用支持HoloLens和WMR头显。

借助《Microsoft Layout》，用户可以在MR中结合实际环境进行空间设计。用户只要导入3D模型就可以创造出真实尺寸大小的房间，然后便可在现实的物理空间中，或者是完全虚拟的世界中，体验到设计的实际效果。该应用还支持用户查看、实时编辑和分享开发人员创建的全息图模型，从而帮助简化整个设计流程，节省时间。这些底层功能，可帮助大型企业为大型设备创建虚拟布局，以确保设备在购买和安装之前是合适的。例如，借助《Microsoft Layout》可快速设计出高效的工厂车间。小伙伴们在玩VR游戏的时候，应该有碰到过游戏只兼容特定的头显，用其他头显玩就会出现无法配置游戏的情况。为了解决这一问题，Valve推出了新的SteamVR输入系统——SteamVR Beta版。

该系统允许用户自定义配置手柄，甚至可以在系统中自定义新手柄（可能是还未开发的手柄），以使其在SteamVR上玩到更多的游戏。另外，Valve还为左撇子用户、残疾用户或其他具有个人偏好的用户调整了控制方案。对于游戏开发者来说，新的SteamVR输入系统，让其可以更轻松地为每款手柄设置默认绑定该游戏。并且还提供替代控制方案，即无需更新游戏也能适配其他手柄。此外，用户在完善了一个控制方案后，还可在Steam Workshop上与其他人分享。VR应用《Tilt Brush》想必大家已经不陌生了，而近期，MozillaVR团队已研发出基于Web的网页版Tilt Brush——A-Painter，可以让用户更方便地浏览VR作品。

操作很简单。用户无需安装创作软件，只要在支持WebVR的浏览器中打开A-Painter官网，带上HTC Vive头显（目前仅支持），拿起控制器，按下扳机键，就可以开始轻松创作自己的作品了。即使没有VR头显，用户还可以通过鼠标和键盘，或者是移动设备来浏览他人的VR作品。另外，只需复制和粘贴URL即可与世界共享自己的作品。小编了解到，A-Painter目前提供了超过30个笔刷，还支持用户通过A-PainterBrush API自定义新的笔刷。官方表示，未来将会增加更多功能，例如保存屏幕截图和GIF动图、音频响应刷、多用户画家和观众模式、导入glTF模型、导出为标准3D文件格式，甚至是后期处理滤镜等等。当然，要想享受更多功能，还得靠用户更多地使用，并提供反馈。

通过上述介绍，大家应该也看到了：这些便捷的小工具或应用，上手非常简单，让部分对VR有着“高冷”印象，或者因为复杂的操作，而对VR望而却步的人，有了更简单的理由来尝试VR。小编相信，随着底层技术的不断革新，将会为VR的普及与落地带来更大的空间。

本文属VRPinea原创稿件，转载请洽：brand@vrpinea.com

    关注 VRPinea