苹果哭晕在厕所,开发者用 Quest Pro 复刻了 Vision Pro 的 EyeSight
(相关资料图)
高贵的 EyeSight 有了平替方案
精致有料的科技报道
- shenzhenware-
尽管 2023 年刚刚过半,但是要提及 2023 年全球最具影响力的产品,苹果上个月发布的 Vision Pro 绝对占有一席之地。
强大的硬件、丰富的生态和应用以及人性化的人机交互,让人印象深刻。而其中最为人津津乐道的功能之一,则是被苹果称为有别于市面上其他 VR 头显的功能——EyeSight。
在此,我们先简单地对 EyeSight 做一下回顾:
当有人靠近正配戴 Apple Vision Pro 的使用者时,设备的视区会变透明,让用户可以看见这个人,同时走近的人也会看到用户的眼睛。
当用户沉浸于空间环境或者使用 app 的时候,EyeSight 会提供视觉线索,让他人知道用户在专注做什么。
这项突破性的功能旨在打破传统 VR 设备的「隔离」属性,让佩戴者与周遭的用户保持连接。
然而,苹果这个美好的愿景在 Vision Pro 高昂的售价和相对遥远的上市日期面前,注定会让不少用户无法在第一时间享受到原生的体验。
好消息是,高贵的 EyeSight 现在有了一个平替的方案。
国内开发者「放学臻」利用 iPhone、Meta Quest Pro 和自主研发的应用,「实现了」苹果的 EyeSight 功能。甚至在某种程度上,其体验超越了苹果的 EyeSight。
这套组合方案被称为——Quision Pro。
从演示视频中,我们可以看到,放学臻将一台 iPhone 作为外部显示屏,通过一个物理连接支架与 Meta Quest Pro 进行连接,使用时,即可将佩戴者眼部运动和表情在 iPhone 上呈现出来。
与 Vision Pro 展示的是佩戴者本身的数字化身不同,Quision Pro 可以自定义显示的图像,通过简单地左右滑动即可进行切换。
而苹果强调的「使用视觉线索来保护隐私」,Quision Pro 也能够通过在 iPhone 屏幕上划来进行状态的切换。
甚至,Vision Pro 中当人物靠近自动切换成透视状态也有对应的实现。尽管过渡动画远不如 Vision Pro 精细,但是这些都可以通过后期优化来解决。
不仅如此,Quision Pro 还做了两款小游戏。佩戴者可以通过改变头部的位置来让空间里的篮球和猫咪朝着某一方向运动,让我们看到了 EyeSight 这一功能的趣味玩法。
通过各个渠道的信息汇总,我们对 Quision Pro 背后的实现原理也做了一番梳理:
Quision Pro 通过使用 Meta Quest Pro 来进行面部表情跟踪,然后通过本地无线网络将数据发送至 iPhone。
iPhone 在获取到数据之后,渲染出用户的 3D 视角,借助于 iPhone 的 LiDAR 和 ARKit,将渲染出的眼球视线指向观看者的眼睛,从而实现在外部看起来无论观看者在哪个角度都能「被注视」着的效果。
这里还有一个小插曲,尽管 iPhone 在放置于 Meta Quest Pro 前面时遮挡了 Quest Pro 的前置摄像头,但是 Quest Pro 侧面的摄像头也依然能够保证其工作时的效果不受影响。
最后还必须介绍一条利好。放学臻表示,这个项目里的 EyeSight 效果利用 Android 的 ARCore 也完全可以实现,并且 Quision Pro 项目在完成调试后将会开源。这意味着如果不考虑侵权的问题,苹果的 EyeSight 完全是有可能在其他一众 VR 头显上得以实现。
湾里小结
放学臻用简单的演示向我们还原了苹果 Vision Pro 的 EyeSight,但是理性来讲,这一技术背后的实现还有很多难题需要解决,这也是为何苹果在 WWDC 会后并没有提供这项功能的现场体验——一个成熟的商品需要考虑到各种意外条件下产生的不良影响。
但是我们很高兴看到已经开发者已经走出了第一步,并且为行业其他的产品实现提供了有价值的思路。相信随着苹果 Vision Pro 开发工具包的发布,我们会看到越来越多有趣和有价值的应用。■
主笔:陈述 / 深圳湾
编辑:晓月 / 深圳湾