眼球追踪在5G+XR场景中的新趋势：专访七鑫易维XR业务部总经理路伟成

目前七鑫易维正在积极布局，远程教育相关的眼球追踪技术方案...

来源｜93913

作者｜丹哥说VR

在春意盎然的4月，我来到七鑫易维在北京的新办公室，采访了七鑫易维xr业务部总，经理路伟成。作为国内眼球追踪技术的领军企业，七鑫易维不仅在今年ces期间亮相，了多款vr/AR眼球追踪集成与配件解决方案，而且还携手HTC、NVIDIA共同发起了“Droolon杯”眼球追踪VR内容开发大赛。通过此次交流，我了解到了本次大赛的来龙去脉，同时也对眼球追踪技术在5g时代呈，现出的一些新趋势(新趋势)有了更深的理解。

面向全球开发者的眼球追踪VR内容开发大赛

2019年12月18日，由七鑫易维主办、HTC协办、NVIDIA提供技术支持的“Droolon杯”眼球追踪VR内容开发大赛正式启动。本次大赛旨在推广眼球追踪，技术在vr领域的广泛应用，并围绕HTC Vive系列VR头显（包含Cosmos、Focus Plus、Vive Pro等）以及七鑫易维眼球，追踪产品而展开。大赛提供了总价值，60万元的丰厚奖金奖品，其报名截止日期也由原来的3月31日，延至4月30日。路伟成表示，受到新冠病毒疫情影响，本次大赛的报名以及后续的评审和，颁奖环节有所推延。不过，即使是在疫情之下，也有许多内容团队报名参赛，其中涵盖了游戏、教育、医疗等不同行业的多种应用场景。与此同时，得益于HTC与NVIDIA在海外地区的宣传，一些海外的内容团队，也参与到本次大赛之中，进一步提升了参赛作品，的深度和广度，对于在全球范围里推广眼球，追踪技术起到了非常积极的作用。

关于本次大赛的评审标准，路伟成透露，大赛评委最为看重的主要有三点。第一点是实用性，评委首先关注参赛作品从哪些方面解决什么样，的行业痛点或问题，任何技术普及的关键，都在于其实用性，而徒有酷炫的噱头则意义不大；第二点是新颖性，本次大赛鼓励推动相关，行业进步的创新应用，而相对来说“重复造轮子”的应用并无太大价值；第三点是商业价值，与纯粹学术性的应用相比，在某个细分领域能够产生较大商业价值的，应用将获得更多青睐。除了以上最为重要的三点，作品的美观性、技术含量等其他因素也将被，列入考察范围。

4月30日之前，本次大赛的报名通道将继续面对全球的，开发者及内容团队开放。除了丰厚的奖金及奖品，大赛还获得了HTC、nvidia这样的科技大厂的，强力支持以及更多投资机构的关注。对于希望在xr领域一展拳脚的，创业团队来说，这绝对是一次展现自身实力、获取更多资源的宝贵机遇，对此感兴趣的团队可以关注七鑫易维的微信，公众号并报名参赛。

眼球追踪技术在不同应用场景中的新趋势

在以往的交流中，我印象中眼球追踪，技术有着三大应用方向：注视点渲染、眼动数据分析与眼动交互（即眼控）。这次在了解完“Droolon杯”大赛的情况之后，我还请路伟成分享了今年眼球追踪技术在不同应用场景中呈，现出的一些新趋势(新趋势)。

第一个新趋势(新趋势)是注视点渲染开始，真正成为一种主流应用，而出现这一趋势的原因主要在于vr头显，的屏幕分辨率的提升。进入2020年，4K分辨率逐渐成为VR头显的主流，一些高端产品还提供了5k，及8k分辨率。随着屏幕分辨率越来越高，VR内容渲染的性能要求与日俱增，其结果就是即使性能较强，的pc也会面临很大的渲染压力，进而导致用户使用成本的，上升和使用体验的下降（渲染压力可能导致画面掉帧）。而对于诸如vr一体机这样的，移动vr设备，其GPU渲染性能本来就比PC低很多，运行优质、大体量vr内容的渲染压力，自然就更大。在这种情况下，采用注视点渲染技术可以极大，降低pc或移动设备的渲染压力：用户在体验VR内容时，只有其注视区域被精确渲染，其余区域则被低分辨率渲染，由此在理论上可以优化60-80%的数据量。“用户想要获得更好的沉浸式体验，就需要更大的视场角和，更高的分辨率，而在这个过程中，渲染压力将会越来越大，而注视点渲染的，重要性也就越来越高。”

第二个新趋势(新趋势)是一些行业客户对于，虹膜识别的需求逐渐增大。随着vr硬件及应用在行业，市场逐渐普及，有不少应用场景都，需要进行用户身份识别，比如在VR教育场景中，教学系统需要根据不同的学生账号，提供相应的内容，而在vr头显里最方便的身份认证，方式就是虹膜识别，用户只需戴上VR头显，系统就能通过识别用户的虹膜来，完成其登录操作。目前七鑫易维的眼球追踪产品集成，了虹膜识别功能，能够满足不同应用场景中的用户，身份识别需求。

第三个新趋势(新趋势)，是眼控作为一种辅助的交互方式，将会融入到未来的自然，交互方式之中。“我们看到新的自然，交互方式正在逐渐取代手柄，比如Oculus Quest开始支持手势识别，而眼动作为指向性输入最为合适。未来我们极有可能通过，眼动选择对象，然后通过手势与语音进行确认，或其他操作，这种眼、手、口结合的自然交互将成为一种趋势，而眼控将作为一种辅助的交互方式发挥，越来越重要的作用。”当我问到眼控，会不会造成眼部疲劳时，路伟成告诉我，这主要是一个设计问题：如果包含选择、确认等操作在内的全部交互，都采用眼控，那确实会导致用户眼部疲劳；但如果将眼控作为眼手口多模态，自然交互的一部分，眼动只作为指向性选择，这种类似用户在现实生活中的自然，行为的交互并不会造成其眼部疲劳。

关于眼球追踪技术与目前，大热的5g的结合点，路伟成认为，前面提到的注视点，渲染对于云vr同样适用。“5G使得云VR服务成为可能，而目前影响其普及，的主要因素就是延迟，较大的延迟将造成用户眩晕，降低其使用体验。在这方面，注视点渲染一方面可以，降低云端的渲染压力，另一方面还可以降低，网络传输的数据量，其最终结果就是延迟的降低以及，用户体验的提升。目前基于云vr的注视点渲染，技术方案还处于刚刚启动测试的阶段，我们正在与运营商和云服务，提供商进行探讨，希望能够共同合作，打通这条链路。”

基于硬件及软件的新品布局

目前，七鑫易维已经为HTC、爱奇艺、小派、影创、0glasses、Nreal等VR/ar硬件厂商的产品提供，了相应的眼球追踪技术解决方案，同时还与nreal合作推出了集成眼球追踪，功能的mr眼镜，相关的配件及集成产品将于接下来，的五六月份上市。

谈到近期疫情的影响，路伟成表示，虽然疫情对于其硬件，产品的生产以及“Droolon杯”大赛都产生了一定影响，但同时也催生了一些新的业务需求，比如许多公司开始，定期举行远程会议，而不少学校也开始实施，大规模的远程教育。相对于采用语音、文字以及二维视频图像交流的，传统远程会议，最接近真实交流的就是VR会议，而眼球追踪技术可以增加，人们在vr会议中的眼神交流，进一步提升用户的沉浸感。此外，在远程教育中，老师不像在课堂上，一样可以实时观察到学生的反馈，而眼球追踪则可以弥补这点不足，无论是VR头显还是笔记本、平板电脑或手机，眼球追踪技术都可以采集学生，的眼动数据（比如学生是否在看屏幕），这些数据能够及时有效的，反馈教学效果，有利于远程教育教学质量的提升。目前七鑫易维正在积极布局，远程教育相关的眼球追踪技术方案，以满足近期已成为刚需，的远程教育需求。

在新品研发上，七鑫易维正在根据市面上VR/AR硬件主体的形态变化进行跟进，比如从去年开始出现的，紧凑型光学方案（短焦VR眼镜）正在逐步走向主流，而技术团队也相应推出了面向紧凑型，光学硬件的解决方案。除了硬件的升级迭代，七鑫易维还在软件层面上进行布局，推出了一系列连接硬件，与内容厂商的“中间层”产品，比如具备眼动数据，分析功能的插件，开发者只需在自己熟悉的开发环境中，加入这类插件，就可以轻松集成采集用户，眼动数据并进行分析的功能，如此也相应减轻了，开发者的开发负担。此次与路总的交流，让我对于眼球追踪技术的，应用及前景获得了更为全面的认识。在全新的2020年代，我们看到了这项技术更加广阔的市场空间以及，对于xr产业的推动作用。在此我们衷心祝愿七鑫易维能够在相关技术快速发展的，进程中扮演越来越重要的角色，并让眼睛这扇心灵的窗户，在未来带给我们一个更加美丽的世界。