科技食谱

高通公司的支持5G的VR / AR参考耳机

由于Corona 19,MWC 2020活动被暂停。最终,高通在在线新闻发布会上宣布了新的XR耳机参考设计。

该产品结合了相机和基于高通去年发布的XR平台Snapdragon XR2的各种传感器。它具有高质量的移动XR和5G通信功能,这将成为VR的关键。 XR(扩展现实)是结合虚拟现实VR,增强现实AR和混合现实MR的词。

Snapdragon XR2的CPU和GPU性能是Oculus Quest和HTC Vibe Focus采用的Snapdragon 835的两倍,视频带宽为四倍,分辨率为六倍,AI处理速度为11倍。尽管这似乎是对AI的模糊表达,但设备上机器学习引擎对于实现接近人类感知的VR或AR应用(例如手指跟踪,面部表情,语音识别摄像头以及与虚拟对象的交互)非常重要。通过各种传感器。做。

这次发布的参考设计支持7个相机。内部有两个用于凝视跟踪,外部有两个用于头部跟踪和周围环境映射,另外两个是用于MR的RGB摄像头,可透视外部或与虚拟对象重叠。每个制造商都可以添加用于面部表情识别,嘴唇跟踪和控制器跟踪的摄像机。

Qualcomm X55 5G调制解调器支持5G,并支持毫米波和6GHz以下波。除了简单地流传输高清VR视频外,还有一些AR应用程序可以从附近的PC流传输或以低延迟连接到边缘计算节点。边缘计算是通过将计算节点放置在5G基站或路由器中并与无线网络集成,以低延迟与大量数据进行智能交互的想法。移动终端非常沉重,以至于现有的云计算由于处理时间缓慢而可以近乎实时地进行处理,或者将来可以加速AR应用程序所需的海量数据的本地处理。

另一个参考设计规范支持手部跟踪和头部跟踪,用于SLAM的IR发射器,每侧支持2K的液晶显示器以及来自伙伴NDI的跟踪接收器(Atraxa),以及用于眼睛跟踪的偏心渲染。符合支持的Tobii。

Atroxa是一项通过磁性和加速度传感器实现精确6DoF跟踪的技术。就像使用耳机侧传感器来测量控制器磁性的光学跟踪一样,它可以在摄像头视角之外进行测量,例如被手或其他控制器遮挡的背面,而无需依赖摄像头图像。

使用凝视跟踪的Fobited渲染技术可以通过围绕高清点的兴趣点进行绘制,从而实现图形超出实际GPU性能的效果,无论您身处何处,都可以以其高品质观看。即使在现有的无法跟踪眼睛的虚拟现实耳机中,它也支持“固定凹进”渲染,该渲染中的视觉中心以高分辨率呈现,而周围环境以低分辨率呈现。在固定的情况下,通过仅将视线对准头部而不移动头部,即可使图形看起来粗糙,或者不会略微转动视线以阅读文本。您需要通过移动头部并向前看保持意识。但是,通过凝视跟踪,可以以高品质绘制感兴趣的点,主观上感觉好像整体图形质量有所提高。

此次发布的公告预计将在几个月后提供给想要使用Snapdragon XR2制作耳机的OEM。被消费产品采用需要更多的等待。相关信息可以在这里找到。