Nvidia使用LED传感器开发轻量级VR凝视跟踪系统

 
世界上所有顶级虚拟现实耳机制造商都同意，凝视追踪将成为下一代VR硬件的基础，因为能够实时感知眼睛位置的能力使计算机能够优化细节渲染，甚至提供光标控制无需手或头移动。但是凝视追踪硬件目前不便宜，也不小，因此Nvidia的研究人员提出了一种新颖的解决方案，可以使该技术变得更加普及。
Nvidia的新型凝视追踪器利用普通LED的功能-它们既能发光又能感知光-可以简化确定眼睛相对于显示器的位置的过程。像其他凝视跟踪系统一样，Nvidia系统使用一圈红外LED将看不见的光投射到眼睛中，但是在这里，LED也用于从同一位置进行颜色选择感测。研究人员指出，这可以实现迄今开发的最小，成本最低的凝视跟踪，并与当今最常见的解决方案的准确性和采样率相匹配。
在一个原型中，Nvidia每只眼睛总共使用9个LED，其中三个发出红外光，六个使用该LED感应光，而第二个原型，每只眼睛使用6个LED作为光传感器和光源。由于LED消耗的功率很少，并且依赖于相对简单的控制器硬件和软件，因此它们减少了总延迟，减少了头戴式耳机所需的摄像头数量，并消除了头戴式耳机管线内额外的图像处理模块的需求。
尽管Nvidia的解决方案性能足以满足典型的VR应用，但研究人员警告说，它可能不适合阅读，神经系统应用或心理研究。 LED系统的中间角度误差为“良好”，为0.7度，平均角度误差低至1.1度，而基于摄像头的替代方案可以提供“非常高精度”的结果，且误差水平低于0.5度。 Nvidia还指出，与其他解决方案相比，其初始校准阶段“比较长”，在许多情况下，该解决方案使用“在这里，在这里，在这里和在这里看”系统与眼睛保持同步，并且如果佩戴者的脸部相对于其相对移动，则必须重新校准。感应硬件。
Nvidia的凝视感应LED系统仍处于原型阶段，因此尚未准备好挑战HTC和Pico VR耳机中的Tobii解决方案，或为Nreal Light选择的7invensun替代品。但是，它可能会进入下一代VR头戴式耳机，从而使新型廉价且轻巧的型号具有更高的性能-假设研究人员能够找到使校准过程足够快而又不会惹恼用户的方法。