眼球追踪在5G+XR场景中的新趋势:专访七鑫易维XR业务部总经理路伟成

🤖 由 文心大模型 生成的文章摘要
在春意盎然的4月,我来到七鑫易维在北京的新办公室,采访了七鑫易维XR业务部总经理路伟成。作为国内眼球追踪技术的领军企业,七鑫易维不仅在今年CES期间亮相了多款VR/AR眼球追踪集成与配件解决方案,而且还携手HTC、NVIDIA共同发起了“Droolon杯”眼球追踪VR内容开发大赛。通过此次交流,我了解到了本次大赛的来龙去脉,同时也对眼球追踪技术在5G时代呈现出的一些新趋势有了更深的理解。
面向全球开发者的眼球追踪VR内容开发大赛
2019年12月18日,由七鑫易维主办、HTC协办、NVIDIA提供技术支持的“Droolon杯”眼球追踪VR内容开发大赛正式启动。本次大赛旨在推广眼球追踪技术在VR领域的广泛应用,并围绕HTC Vive系列VR头显(包含Cosmos、Focus Plus、Vive Pro等)以及七鑫易维眼球追踪产品而展开。大赛提供了总价值60万元的丰厚奖金奖品,其报名截止日期也由原来的3月31日延至4月30日。路伟成表示,受到新冠病毒疫情影响,本次大赛的报名以及后续的评审和颁奖环节有所推延。不过,即使是在疫情之下,也有许多内容团队报名参赛,其中涵盖了游戏、教育、医疗等不同行业的多种应用场景。与此同时,得益于HTC与NVIDIA在海外地区的宣传,一些海外的内容团队也参与到本次大赛之中,进一步提升了参赛作品的深度和广度,对于在全球范围里推广眼球追踪技术起到了非常积极的作用。
关于本次大赛的评审标准,路伟成透露,大赛评委最为看重的主要有三点。第一点是实用性,评委首先关注参赛作品从哪些方面解决什么样的行业痛点或问题,任何技术普及的关键都在于其实用性,而徒有酷炫的噱头则意义不大;第二点是新颖性,本次大赛鼓励推动相关行业进步的创新应用,而相对来说“重复造轮子”的应用并无太大价值;第三点是商业价值,与纯粹学术性的应用相比,在某个细分领域能够产生较大商业价值的应用将获得更多青睐。除了以上最为重要的三点,作品的美观性、技术含量等其他因素也将被列入考察范围。
4月30日之前,本次大赛的报名通道将继续面对全球的开发者及内容团队开放。除了丰厚的奖金及奖品,大赛还获得了HTC、NVIDIA这样的科技大厂的强力支持以及更多投资机构的关注。对于希望在XR领域一展拳脚的创业团队来说,这绝对是一次展现自身实力、获取更多资源的宝贵机遇,对此感兴趣的团队可以关注七鑫易维的微信公众号并报名参赛。
眼球追踪技术在不同应用场景中的新趋势
在以往的交流中,我印象中眼球追踪技术有着三大应用方向:注视点渲染、眼动数据分析与眼动交互(即眼控)。这次在了解完“Droolon杯”大赛的情况之后,我还请路伟成分享了今年眼球追踪技术在不同应用场景中呈现出的一些新趋势。
第一个新趋势是注视点渲染开始真正成为一种主流应用,而出现这一趋势的原因主要在于VR头显的屏幕分辨率的提升。进入2020年,4K分辨率逐渐成为VR头显的主流,一些高端产品还提供了5K及8K分辨率。随着屏幕分辨率越来越高,VR内容渲染的性能要求与日俱增,其结果就是即使性能较强的PC也会面临很大的渲染压力,进而导致用户使用成本的上升和使用体验的下降(渲染压力可能导致画面掉帧)。而对于诸如VR一体机这样的移动VR设备,其GPU渲染性能本来就比PC低很多,运行优质、大体量VR内容的渲染压力自然就更大。在这种情况下,采用注视点渲染技术可以极大降低PC或移动设备的渲染压力:用户在体验VR内容时,只有其注视区域被精确渲染,其余区域则被低分辨率渲染,由此在理论上可以优化60-80%的数据量。“用户想要获得更好的沉浸式体验,就需要更大的视场角和更高的分辨率,而在这个过程中,渲染压力将会越来越大,而注视点渲染的重要性也就越来越高。”
第二个新趋势是一些行业客户对于虹膜识别的需求逐渐增大。随着VR硬件及应用在行业市场逐渐普及,有不少应用场景都需要进行用户身份识别,比如在VR教育场景中,教学系统需要根据不同的学生账号提供相应的内容,而在VR头显里最方便的身份认证方式就是虹膜识别,用户只需戴上VR头显,系统就能通过识别用户的虹膜来完成其登录操作。目前七鑫易维的眼球追踪产品集成了虹膜识别功能,能够满足不同应用场景中的用户身份识别需求。
第三个新趋势是眼控作为一种辅助的交互方式,将会融入到未来的自然交互方式之中。“我们看到新的自然交互方式正在逐渐取代手柄,比如Oculus Quest开始支持手势识别,而眼动作为指向性输入最为合适。未来我们极有可能通过眼动选择对象,然后通过手势与语音进行确认或其他操作,这种眼、手、口结合的自然交互将成为一种趋势,而眼控将作为一种辅助的交互方式发挥越来越重要的作用。”当我问到眼控会不会造成眼部疲劳时,路伟成告诉我,这主要是一个设计问题:如果包含选择、确认等操作在内的全部交互都采用眼控,那确实会导致用户眼部疲劳;但如果将眼控作为眼手口多模态自然交互的一部分,眼动只作为指向性选择,这种类似用户在现实生活中的自然行为的交互并不会造成其眼部疲劳。
关于眼球追踪技术与目前大热的5G的结合点,路伟成认为,前面提到的注视点渲染对于云VR同样适用。“5G使得云VR服务成为可能,而目前影响其普及的主要因素就是延迟,较大的延迟将造成用户眩晕,降低其使用体验。在这方面,注视点渲染一方面可以降低云端的渲染压力,另一方面还可以降低网络传输的数据量,其最终结果就是延迟的降低以及用户体验的提升。目前基于云VR的注视点渲染技术方案还处于刚刚启动测试的阶段,我们正在与运营商和云服务提供商进行探讨,希望能够共同合作,打通这条链路。”
基于硬件及软件的新品布局
目前,七鑫易维已经为HTC、爱奇艺、小派、影创、0glasses、Nreal等VR/AR硬件厂商的产品提供了相应的眼球追踪技术解决方案,同时还与Nreal合作推出了集成眼球追踪功能的MR眼镜,相关的配件及集成产品将于接下来的五六月份上市。
谈到近期疫情的影响,路伟成表示,虽然疫情对于其硬件产品的生产以及“Droolon杯”大赛都产生了一定影响,但同时也催生了一些新的业务需求,比如许多公司开始定期举行远程会议,而不少学校也开始实施大规模的远程教育。相对于采用语音、文字以及二维视频图像交流的传统远程会议,最接近真实交流的就是VR会议,而眼球追踪技术可以增加人们在VR会议中的眼神交流,进一步提升用户的沉浸感。此外,在远程教育中,老师不像在课堂上一样可以实时观察到学生的反馈,而眼球追踪则可以弥补这点不足,无论是VR头显还是笔记本、平板电脑或手机,眼球追踪技术都可以采集学生的眼动数据(比如学生是否在看屏幕),这些数据能够及时有效的反馈教学效果,有利于远程教育教学质量的提升。目前七鑫易维正在积极布局远程教育相关的眼球追踪技术方案,以满足近期已成为刚需的远程教育需求。
在新品研发上,七鑫易维正在根据市面上VR/AR硬件主体的形态变化进行跟进,比如从去年开始出现的紧凑型光学方案(短焦VR眼镜)正在逐步走向主流,而技术团队也相应推出了面向紧凑型光学硬件的解决方案。除了硬件的升级迭代,七鑫易维还在软件层面上进行布局,推出了一系列连接硬件与内容厂商的“中间层”产品,比如具备眼动数据分析功能的插件,开发者只需在自己熟悉的开发环境中加入这类插件,就可以轻松集成采集用户眼动数据并进行分析的功能,如此也相应减轻了开发者的开发负担。
此次与路总的交流,让我对于眼球追踪技术的应用及前景获得了更为全面的认识。在全新的2020年代,我们看到了这项技术更加广阔的市场空间以及对于XR产业的推动作用。在此我们衷心祝愿七鑫易维能够在相关技术快速发展的进程中扮演越来越重要的角色,并让眼睛这扇心灵的窗户在未来带给我们一个更加美丽的世界。

【93913原创内容,转载请注明及回链】