（XR导航网 2024年02月07日）随着苹果Vision Pro的发售，近眼显示技术专家卡尔·古塔格（Karl Guttag）开始着手研究这款设备。在日前一篇博文中，古塔格分享了关于Apple Vision Pro（AVP）的早期发现，并放出了数张镜后图（用相机拍摄通过显示透镜看到的影像）。
基于眼动追踪的渲染，或许是“聪明反被聪明误”
AVP有时是“聪明反被聪明误”，并导致了糟糕的视觉假象。除了用于选择外，AVP的眼动追踪同时可以通过预处理图像来改变分辨率并纠正光学系统中的颜色问题（像差）。这使得拍摄变得棘手，因为相机镜头看起来与人眼不同。
今天，我拼凑了些电子表格来测试我拍摄通过AVP光学元件看到的影像的能力。我首先使用AVP的原生Excel app显示两个大型Excel电子表格。一个电子表格是白色背景黑色文本，而这似乎是AVP令文本和线条看起来比原本应该的样子“更粗”。AVP似乎“增强”了电子表格的可读性。
但后来我试着用黑色背景白色文本，而跟随眼动追踪的方框开始出现闪烁。幸运的是，AVP的录像捕捉到了下面视频中的效果：
我想强调的是，不仅仅是相机或AVP的视频捕捉到了注视点渲染的问题，这同时是我亲眼所见。我提供了下面的电子表格，这样任何拥有AVP的人都可以验证我的发现。我是在AVP运行的Excel中测试了这一点。如果你进入Excel中的“视图”，用放大镜缩小视图3次或4次来变小文本和方框，这样最容易看到效果。
我的第一次镜后图实验
由于其基于眼动追踪的渲染，AVP很难拍摄通过AVP光学元件看到的影像。追踪效果在不同的相机和镜头下表现不同。当设置相机时，我可以看到AVP在改变颜色，有时会导致照片的颜色与我的眼睛看到的不同。
很明显，即便是电子表格这样的静态对象，AVP都会使用“注视点”可变分辨率渲染。这种重渲染是基于眼睛进行，并且由于3D空间锁定（即SLAM）的变化导致了在白色文本黑色背景电子表格的线条中看到的伪影。
另外，显示器的分辨率肯定低于人眼的分辨率，因为如果你看一下白色文本黑色背景电子表格，你可以很容易地看到抗混叠的“扭绳”涟漪效应。
我应该指出的是，如果没有注视点渲染，整个图像就会闪烁。然而，注视点渲染会恶化，因为它在注视点区域和低分辨率区域之间的边界创建了一个可见正方形。通过改变文本和线条的分辨率和厚度，“注视点渲染”使得情况变得更糟。我认为，更优雅的降级处理是让整个图像以相同的方式渲染，就让整个图像闪烁，而不是让方框闪烁，以及让边线变粗。关键的一点是，AVP的显示屏虽说比几乎所有其他VR/MR头显都要好得多，但正如苹果所说的一样，它并不是“视网膜分辨率”。
下面是一些镜后图。第一张是用R5相机拍摄，28mm镜头，并通过“像素移位”获得了4亿像素的图像。
下面的第二张照片是用Olympus D mark III拍摄，17mm镜头。它没有R5的分辨率，但AVP的眼动追踪在这个镜头下表现得更好。这台相机有一个2400万像素的传感器，然后我用它的像素移动功能捕捉到了大约8000万像素的图像。
如果你溜转一下全分辨率图像，你可以在大部分图像中辨别出像素网格，但文本会更快地变得模糊。初步看来，这似乎意味着注视点渲染。我还没来得及检查，但我怀疑分辨率下降是与白色文本黑色背景电子表格中的方块一起出现。
总结
设计师在应用技术方案时必须非常小心。有时候，橘生淮南则为橘，生于淮北则为枳。
最大的问题可能是AVP软件或Excel移植版有bug。我并不是说如果不改善这个问题就是世界末日。可能会有一种方法可以“淡化”注视点渲染来缓解这个问题，但考虑到显示分辨率，我不认为有任何方法可以消除它。与此同时，我尝试的第二次测试导致注视点渲染“崩溃/消失”。由于这种情况那么容易就发生，它很可能会在其他地方出现。从根本上说，这主要归结于显示器的分辨率不及人眼。
© 版权声明
文章版权归作者所有，未经允许请勿转载。
相关文章
暂无评论...
ZH 
EN_US