苹果,Meta和PICO等头显厂商都在积极发展MR头显,高通同样不例外。在今年年初,除了发布全新的骁龙XR2+ Gen 外,高通同时发布了一款由歌尔开发的全新MR头显参考设计。
日前,高通的产品管理高级总监赛德·巴卡迪尔(Said Bakadir)就在专访中就谈到了MR头显的潜在优势和缺点,以及最为受益的集成技术等等。
MR头显旨在将空间数据与自然环境相结合,不同于完全沉浸式VR头显。这种方法的潜在优点和缺点是什么?
混合现实是将虚拟对象集成到现实中,将虚拟世界融入现实世界,将增强现实和虚拟现实的优点结合在一起。骁龙MR技术可实现更加身临其境的体验,以鲜艳的色彩和直观的交互增强真实感。
这项技术的好处:
逼真的沉浸感:通过将空间数据与真实环境相结合,MR头显可以创造出更逼真的体验。用户可以与虚拟对象进行交互,并同时依然能够感知到他们的物理环境,从而实现虚拟和真实的无缝集成。这种程度的沉浸感非常适合硬技能和软技能培训,比如教育,娱乐和健康。
上下文:MR头显为用户提供与他们现实环境相结合的相关信息和虚拟内容。这在培训、教育和远程协作等应用程序中特别有用。
感知:混合现实强化了临场感。MR头显允许用户保持对周围环境的感知。在用户需要浏览物理空间或与他人交互的同时依然参与虚拟内容的情况下,这可能是有益的。
这项技术的挑战:
将真实环境的空间数据与用户眼前的虚拟内容相匹配,需要复杂的追踪技术和映射技术来精确地将虚拟内容与物理世界结合起来。
在舒适的设备中实现精确的空间映射、低延迟的视频透视以及虚拟与物理的真实集成,这都是需要解决的技术挑战。利用骁龙XR平台和我们在感知技术方面长达数十年的研发努力,我们能够直面相关的挑战,并在处理和设备上的人工智能方面进行创新。
MR头显最受益的集成技术是什么?
包括视频透视和感知技术在内的几项集成技术对MR头显大有好处,而骁龙XR平台使得所述技术成为可能。尺寸合适、经过优化的处理器对于满足MR头显的散热和尺寸限制至关重要,同时能提供最佳的用户体验。例如,骁龙XR2 Gen 2旨在解决相关挑战,并提供已在Meta Quest 3中实现的优化MR体验。
视频透视:为了避免晕动症并实现沉浸感,视频透视管道需要以高保真度快速传输用户的物理环境。例如,骁龙XR2 Gen 2和骁龙XR2+ Gen 2包括了优化的VST管道,平均延迟为12ms,图像质量得到改善,用户体验更舒适。
环境追踪:空间映射、对象识别和分割等感知算法创建用户空间的数字地图,并以逼真的方式锚定虚拟内容。这种技术有助于用户在MR会话中保持安全和安心。
用户追踪:交互技术,包括眼动追踪、手部追踪、控制器追踪、六自由度等,所有这些算法都需要强大的机上处理,从而获得最佳的低功耗、低延迟体验。我们的感知技术封装在骁龙Spaces SDK中,为下一代MR体验提供了关键的构建模块。
MR头显应商如何或应该确保所有用户都可以无障碍地使用设备
MR头显供应商可以通过促进包容性,让所有人都能充分参与MR体验,从而确保所有用户都能使用他们的设备。可以考虑采用以下措施:
通用的产品设计:比如舒适的头带,矫正镜片,适应脸型的面垫。
多模态交互输入:厂商可以集成多模态输入方法以适应用户的偏好和/或能力。这可以包括语音命令、手势识别或替代输入法等功能。通过利用所述技术,有物理限制的用户都可以有效地与MR内容交互。
用户界面:应用程序开发者在为XR开发时可以遵循通用设计和可访问性原则。MR头显头显可以根据用户的具体需求为用户提供定制用户界面的选项。这可以包括可调整的字体大小、颜色对比选项和可定制的控制方案。通过允许用户个性化他们的体验,厂商可以满足不同的无障碍需求。