手势交互+多人协作,Nreal积极布局MR内容生态

 

眼动追踪和手势识别的两大输入,方式的叠加,或许会让nreal一步步,接近mr的终极形态。...

眼动追踪和手势识别两大输入,方式的叠加

或许会让nreal一步步,接近mr的终极形态

文 | 缪健(VRPinea2020年3月7日电)2020年初,nreal在ces上发布了,混合现实(MR)环境下的3D操作系统——星云。在近日,nreal宣布将加入,手势识别功能,并提供多方协同,作业的设计软件,以此更好的完善,内容生态体系。同时,Nreal正同韩国LG U+和德国电信等,运营商深入合作,进一步拓展在海外mr领域,的市场份额。


星云系统之上再融合30种手势

让你足够自然地操作模型
电子产品的输入方式,经过pc电脑时代,的键鼠输入,到智能手机时代,已经被触摸手势所代替。而在XR领域中,手势识别的输入方式,被认为是最自然的输入,和交互方式。在以往的类似产品中,vr往往需要加入专门配备,的追踪手套,AR/mr则需要加入专用的手势识别模块和传感器才能,实现实时高精度的手势追踪。

如今,随着计算机视觉,技术的迭代,利用普通摄像头的,slam算法来计算手势操作,成为未来一代xr产品手势识别,的关键技术。nreal目前在不增加额外硬件模块,的基础上,与海外手势交互,应用公司clay AIR合作,将其手势应用引入,到nreal Light上来。



Clay air在2018年曾经与,高通合作,为旗下oem产品,提供关键交互技术。这也是目前xr,头显领域中,为数不多的提供标准化,手势识别的公司。据了解,通过Clay的软件算法,已经可以识别包括拿、捏、抓、轻扫等超过30种用户的,手势动作,从而操纵虚拟物体,与mr环境进行更加直观,的交互。
Nreal light通过前部摄像头将手部动作,分为多个追踪节点,并将手部模型叠加,在这些追踪节点之上,通过高通骁龙855及以上,芯片实现高速的图形渲染,从而实现用户的手势操作。同时,在此前Nreal light已经实现用智能手机,作为控制器,或者专门的6dof控制器进行mr环境,的交互操作。Nreal认为,提供不同的交互方式让开发者和,用户进行选择,才是一个更成熟的硬件开发,企业的职责。
据了解,手势识别功能将在近期,通过nreal SDK提供给开发者,并可以将该功能应用,在支持nreal 3d系统星云的,安卓应用程序中。通过Nreal SDK,开发人员可以进行手势追踪,的自定义,包括重塑或渲染全手、单独的手指、边界框、光标或自定义外观,前期完全支持的,手势包括捏、指向、抓取、滑动和缩放。

nreal此前宣布在全球,范围拥有超过3500个内容开发者,并与全球多家,通信运营商达成合作,包括了日本KDDI、韩国LG U+、德国电信Deutsche Telekom、瑞士电信Swisscom、英国EE等。在韩国,Nreal通过在LG U+的零售店展示,在韩国进行Nreal light设备的举措将mr,带入了韩国消费者的生活。

nreal在2019年推出,消费者版本的nreal Light后,积极布局开发者生态,和海外销售体系。作为国内为数不多在国际市场有所影响力,的mr厂商,nreal正逐步完善内容体系,和挖掘mr在各领域的潜力。

在此前的消息中,nreal和国内尖端的眼动,追踪品牌七鑫易维已达成合作,将于今年推出带有,眼动追踪模块的mr眼镜,眼动追踪和手势识别两大输入,方式的叠加,或许会让Nr
eal一步步接近MR的终极形态。


重构多人协作

带上眼镜随时操作3D模型


MR眼镜除了娱乐领域,工业、设计领域的应用日益凸显。精密机械、高精动画模型、建筑模型通过mr环境,进行设计、定型、维修,已经在部分世界知名,企业应用到生产领域。然而,绝大多数mr环境中的,3d模型,需要工程师不但具备,建模能力,还需要针对mr眼镜,进行软件技术环境的开发。这也是MR+工业领域的一大痛点。同时,多数mr设计软件不具备,多台硬件的协同工作,这也导致了mr在,工业领域的应用场景虽然广阔,但真正落地有着高成本、高难度、低频次的特点。
Nreal针对这一特点,近日与微软hololens的mrpp平台的重要合作,伙伴datamesh达成合作(编者按:mrpp为微软hololens的行业,解决方案认证)。将于近期推出基于Nreal light的行业解决方案,datamesh Director。
该产品定位于简单易,用型的xr内容工具。支持多种cad文件格式,导入,并可对3d数字,模型进行数据修复、格式转换以及轻量化等,处理。并且兼具云端资源管理和傻瓜式编辑,操作等特性。旨在帮助相关企业助企业,员工打破人与人、人与机器的信息交流阻碍,降低工业设计领域,的协作成本。尤其值得一提的是,该产品打通了多台,硬件的同时接入协作。


影像远程会诊平台正式上线

Nreal Light星云平台
近期,黑龙江省影像远程会诊平台,也正式在nreal Light星云平台上线,通过该平台,一线医生可佩戴nreal实现,远程全息阅片及问诊交流,缓解了基层医院,影像阅片压力,加强了对一线阅片医生,的防护。据悉,该解决方案将在黑龙江省哈尔滨医科大学附属,第一医院落地应用。
vrpinea相信在不,久的将来,随着5G网络的到达,nreal能够在mr市,场中占据重要的一席之地。

本文属VRPinea原创稿件,转载请洽:brand@vrpinea.com


抗疫情→MWC丨VR看房丨线下娱乐丨VR心理治疗

技术宅→眼动追踪VS内向外追踪 | 骁龙855Plus

情报党→HTC Vive更新产品线 | 华为VR Glass

大佬说→HTC汪丛青 | 大朋 VR | 索尼 | 暴风 | 微软

展览汇→NYCC 2019  | OC6 | TGS2019 | IFA 2019

爱游戏→第23届DICE大奖 | 《行尸走肉:圣徒与罪人》

电影集→愤怒的小鸟2 |狮子王 | 冰雪奇缘2 | 战争电影

跨行业→家具营销 |艺术 | VR旅游 | VR音乐 |乐高


    关注 VRPinea


微信扫一扫关注公众号

0 个评论

要回复文章请先登录注册