谷歌和三星的混合现实头显可能会从新的高通芯片中得到推动,该芯片支持更多的摄像头和传感器、4K 视频以及与笔记本电脑、平板电脑和手机的快速连接。
三星和谷歌一直对他们即将推出的高级混合现实耳机的细节保持沉默,该耳机希望与苹果的Vision Pro竞争,但现在我们至少知道该设备将使用什么处理器 - 高通XR芯片的新版本。
高通周四宣布的Snapdragon XR2 Plus Gen 2芯片将出现在三星的硬件以及其他一些即将推出的耳机中。高通公司关于新芯片的细节表明了三星头显可以做什么,以及未来一两年内一波更昂贵、专注于专业的头显可能会带来什么。
Meta 去年秋天推出的 Quest 3 是第一款配备高通下一代 XR2 Gen 2 芯片的头显,该芯片提升了图形、彩色直通摄像头质量、外部摄像头支持和板载 AI 功能的可能性。升级的XR2 Plus Gen 2芯片虽然名称令人困惑,但其目标是即将推出的更高端耳机系列,这些耳机在功能和价格上可以直接与苹果3.499美元的Vision Pro竞争。
高通已经确认,除了三星之外,还有一些合作伙伴正在用新芯片制造即将推出的设备:HTC Vive、Immersed(一家已经在制造自己的VR面罩的工作软件公司)、中国电子竞技公司Play for Dream,以及一个尚未宣布的硬件合作伙伴,该合作伙伴将于下周在拉斯维加斯举行的CES展会上公布。
4K显示器,更好的直通混合现实
新芯片的最大优势在于推动更高分辨率的显示器和更多同步摄像头和跟踪器,包括眼动追踪和全身追踪,具体取决于制造商希望如何设计其硬件。高通承诺以 4.3Hz 刷新率使用新芯片,每只眼睛的像素分辨率高达 90K。
高通公司负责VR/AR业务的产品管理高级总监Said Bakadir表示,分辨率的提高也应该意味着更好的直通相机质量。它将支持更好的相机分辨率,并在更好的显示器上更详细地显示图像。Meta 售价 500 美元的 Quest 3 拥有比 Quest 2 更好的摄像头,这使得应用程序可以将现实世界的相机镜头与 VR 融合在一起,创造出类似 AR 的体验,感觉就像在你的世界中一样。苹果即将推出的售价3.500美元的Vision Pro拥有比Quest 3更好的摄像头和显示屏,但三星和其他公司等头显可能会开始使用高通的新芯片接近苹果的混合现实质量水平。
更多传感器、摄像头、跟踪器
预计配备这种升级的高通芯片的耳机也将配备更多传感器。XR2 Plus Gen 2 同时支持多达 12 个摄像头和传感器,而 Quest 3 上的 XR2 Gen 2 为 8 个。其中一些摄像头可能与外部视频捕获或运动跟踪或深度传感器有关。正如高通公司所概述的那样,其他的将是内部的:眼动和面部跟踪摄像头,就像Meta Quest Pro或苹果Vision Pro上的摄像头一样。
其他类型的传感器也可能发挥作用。除了与Quest Pro控制器(也有自己的芯片)非常相似的控制器内摄像头传感器外,全身跟踪传感器也可能发挥作用。或者,感知手部和身体运动的新方法。已经有报道称,三星和谷歌可能会使用基于雷达的Soli传感器技术来帮助进行近身手势跟踪。
高通公司与合作伙伴歌尔合作,使用Tobii眼动追踪相机制作了自己的参考设备头戴式设备,以探索使用该芯片组在混合现实中的注视点渲染。Quest 3没有眼动追踪功能,但许多使用这种新芯片的头显都有可能。
连接其他设备
Wi-Fi 7 支持,这可能意味着可以更快地连接到笔记本电脑、平板电脑和手机。高通已经拥有拆分渲染技术,可以在头显和其他计算机之间共享处理,并一直在探索手机和AR眼镜协同工作的方法。该公司表示,在配备这些新芯片的头戴式设备上,跨设备关系可能会更加牢固,包括将手机与头戴式设备一起使用。巴卡迪尔说,正在与合作伙伴进行对话,以实现基础设施,但电话是关键部分。除了共享渲染外,设备还可以在 AI 功能或共享传感器上进行协作。巴卡迪尔指出了健身的一种可能用途,即使用手机摄像头跟踪您的身体,以便在VR或AR中进行锻炼,因为这两个设备相互连接。
苹果已经非常依赖将Vision Pro定位为一台完整的计算机,也可以与Mac连接。三星和谷歌的耳机可能有类似的方法,可以更好地与电脑和手机连接,也许还可以与谷歌的Android操作系统连接。
谷歌AR副总裁Shahram Izadi在高通新闻稿的一份声明中特别提到了Android,他说:“我们很高兴Android生态系统能够利用Snapdragon XR2 Plus Gen 2的功能并实现新的体验。
自去年冬天宣布合作以来,三星和谷歌一直对他们的混合现实头显计划守口如瓶,但更多的信息应该会在今年的某个时候公布。CNET已经了解到,与手机连接可能是三星设备的一部分,与谷歌Play商店中的2D应用程序兼容将使其比Meta更具优势,尽管运行基于Android的操作系统,但Meta仍然没有Google Play应用程序支持。