索尼专利提出基于光强度CMOS和事件检测传感器，高速预测VR/AR头显追踪
结合光强度光电二极管和事件检测传感器来进行追踪
（映维网Nweon 2024年07月19日）为了正确地呈现虚拟图像及其他原因，当前的AR系统必须追踪头显姿态、用户的眼睛和双手。一般来说，AR系统通过RGB传感器和红外传感器，眼动追踪摄像头，以及计算机视觉技术来完成所述任务。
为了减少延迟和提高追踪性能，AR系统可能采用高速摄像头，增加摄像头数据帧速率。但这同时意味着需要更高的带宽和处理负载。所以，头显耗电量和发热量会相对较大。
针对这个问题，索尼申请了一份名为”Combined light intensity based cmos and event detection sensor for high speed predictive tracking and latency compensation in virtual and augmented reality hmd systems“的专利，并介绍了利用基于光强度的CMOS和事件检测传感器来为VR/AR头显系统进行高速预测追踪和延迟补偿。
为了解决上述挑战，索尼提出的传感器系统包括具有捕获RGB和IR图像的光强度光电二极管的传感器单元，以及借助于EDS原理检测运动的事件检测传感器（EDS）感测单元。
摄像头传感器系统可配置为以中等速度（如每秒两百帧）和相对较高的速率（如每秒两千帧以上）捕获RGB/IR帧。事件检测传感器使用一个或多个摄像头像素感测到的光强度变化作为运动指示。
......（全文 1609 字，剩余 1185 字）
注册用户请登入后阅读完整文章
映维会员、PICO员工、大朋员工可联系映维免费获取权限
