这些功能,
是否有机会成为未来VR头显的“标配”?
文 | 青崖白鹿
(VRPinea2023年10月30日讯)“我不能告诉你什么时候会发生,每一款头显都有自己的配置方案。但在未来,眼球追踪将成为VR头显标准配置的一部分,不过我不确定具体时间。”
上面这段话,是Meta CTO(首席技术官)Andrew Bosworth近日在社交平台上,就眼球追踪问题对粉丝的答复。很显然,在这一问题上,Andrew Bosworth与VRPinea达成了一致,《眼动追踪会不会成为XR未来的“标配”?》。
(Meta CTO Andrew Bosworth)
今天这期文章,小P就来聊一聊,就VR头显如今的发展趋势而言,哪些功能有机会从原来的外置模块or探索性尝试,成为常态化的标准配置,被纳入VR头显的基础功能之中。
眼球追踪
首先,当然就是接着聊一下眼球追踪的话题,眼球追踪如今已经是一项成熟度很高的技术了。在全球范围内,技术成果和商业案例积累最多的两家公司,是瑞典的Tobii和国产厂商七鑫易维。相关分享,各位看官可移步《长谈|《老缪聊科技》专访七鑫易维:眼球追踪领域的国产之光》。
(《老缪聊科技》七鑫易维专访画面)
眼球追踪与VR头显的关系是相辅相成的,VR这个载体,天然的就适合搭载眼球追踪模块。并且,VR头显增添眼动追踪功能之后,在硬件的画质提升、性能提升以及人机交互层面,都能起到明显的作用。
在画质提升这一点上,也就是注视点渲染、视线追踪渲染。可以通过适当降低外围画面分辨率,保证人眼注视区域始终清晰的效果。说得白话些,就是“看哪儿,哪儿清晰”。
(注视点渲染效果图)此外,眼动追踪+面部捕捉,在虚拟社交方向上的应用同样重要。表情模拟在社交舒适性、情感传递等方面,对于虚拟社交的拟真度提升至关重要。
还有一点,瞳孔识别、虹膜认证功能同样离不开眼动追踪技术的支持。这一功能已在苹果Vision Pro上得以实现,“Optic ID”。这样的功能,在设备安全性、虚拟支付等方面,均有重要作用。
(“Optic ID”)
环境感知
VR头显环境感知这一点,近几个月一直被反复提及。这个方面,其实有一条较为清晰的发展路径:完全封闭——VST灰度透视——VST全彩透视——环境感知。
基于高清摄像头、深度传感器、融合算法以及高算力芯片等,VR头显可实现环境感知功能。相较于只需要“看清”外界环境的VST透视(Video See-Through),环境感知的要求更高,其愿景是基于环境感知,实现虚拟空间与物理世界的“无缝融合”。
处于如此阶段的环境感知,才能为MR体验提供坚实的底层支持。当VR头显通过精准的物体识别、深度计算后,实现物理环境3D重建,并在其基础上叠加低延迟、可交互的虚拟内容时,才称得上是真正的MR体验。
(环境感知示意图)手势识别
手势识别倒也谈不上新颖,只是说由于6月发布的苹果Vision Pro,走进了更多人的视线之中。手势识别的人机交互方式,相较于如今的VR手部控制器而言,肯定是更加自然轻松的。
但是,这并不代表“去手柄化”一定是正确的道路。就目前的技术精度而言,识别的稳定性、不同手势的判断以及误识别手部动作等问题还是存在的。
不过,即便手势识别存在以上种种问题,当苹果Vision Pro做了第一个吃螃蟹的人之后,依旧有VR厂商选择跟进。其实原因也很简单,精准性存在问题,但在VR人机交互的过程中,也有很多不需要太过精准就能实现的操作,如画面缩放、UI控制等。
(苹果Vision Pro宣传画面)
人工智能
AI人工智能与XR的关联性上,目前更受关注的是AI+AR的强相关。可以说,在真AR眼镜这个框架内,AI+AR的路径正确性基本获得了业界公认。但其实VR头显同样也需要AI的加持,AI可以为VR体验带去更多提升。
比较直观的一点就是AI语音指令,这也是苹果提出的手、眼、口自然交互逻辑中的一环。不考虑外界环境的情况下(公共场合),通过语音指令实现对VR头显的操作,无疑是最自然且高效的。
(苹果Vision Pro宣传画面)
此外,基于高算力芯片的本地AI,对于VR头显的性能提升也是相当明显的。如上文提到的环境感知,在物理环境重建与虚实交互等方面,都离不开强大AI的支持。
本地AI还能充当VR用户的个人智能助手,进而释放更多、更大的VR生产力,具体画面可参考钢铁侠与贾维斯。AI也可以接入VR游戏之中,为游戏NPC提供智能支持,开发出更多非线性的游戏发展路径。具体画面可参考《失控玩家》。
(《失控玩家》海报)触觉反馈
VR设备模拟虚拟世界的主要手段,其实就是欺骗人的五感:视觉、听觉、触觉、嗅觉和味觉。目前的技术路径,基本都只能实现前三者,或者说前两者和不完全的触觉。而触觉其实就是不同程度的振动,只要振动反馈模拟得足够细腻,触觉体验也就会更加逼真。
目前主流的VR头显其实都可以算作是具备比较初级的触觉反馈功能,也就是手柄振动,但简单机械的马达振动是远远不能与真正的触觉相比拟的。这一点上,索尼的PS VR2算是走得更远的那个。
PS VR2的Sense控制器可以通过内置触觉反馈组件制动器的运动,将游戏里接触不同物体的触觉精准传递到用户手中。这样的表现才谈得上是触觉反馈,才谈得上感官模拟、虚拟现实。
(用户双手持握PS VR2 Sense控制器)
发布于:江苏
相关推荐
这些功能,未来VR头显的杀手锏?
苹果 AR / VR 头显细节进一步确认,功能“遥遥领先”竞争对手
推出超轻量级VR头显,「LUCI 露曦科技」 “ALL IN VR”
苹果首款头显将发布致使行业变天?!VR设备是泡沫还是未来
苹果WWDC开幕在即:可能不会当场发布的AR/VR头显将成最大焦点
arpara VR 5K头显及一体机全球首发,价格进入三千元时代
半价Pico扎堆闲鱼,元宇宙带不热VR头显
Meta Quest Pro VR 头显将支持 Wi-Fi 6E、关机自动更新 App 等
苹果MR头显功能预计远超竞争对手 但出货可能要到今年年底
Meta发布Quest 3 VR头显,高通芯片加持混合现实革命
网址: 这些功能,未来VR头显的杀手锏? http://m.xishuta.com/newsview96227.html