微软AR/VR专利介绍基于自中心图像进行关节旋转和定位的技术
基于自中心图像进行关节旋转和定位
（映维网Nweon 2024年08月07日）自中心图像通常是由用户佩戴的自中心摄像头拍摄。自中心摄像头是一种安装在用户身上并朝向用户身体至少一部分的摄像头。通常，这样的摄像头是朝下的，并安装在头戴式显示器之中，从而以自中心角度捕获视觉信息。
从自中心图像获得一个人的关节的旋转和/或位置对于各种任务都非常有用，包括远程呈现、手势识别、Avatar动画等等。
在日前由美国专利商标局公布的一份专利申请中，微软就介绍了一种基于自中心图像进行关节旋转和定位的技术。
图2示出处理自中心图像，以预测图像中所描绘的人的关节信息。自中心摄像头设置包括两个摄像头，目标是提供一对立体图像202。两个摄像头都向下。
捕获并接收一对立体图像202，然后将其输入训练模型204。所述模型由一个神经网络组成。图4示出了在各种示例中训练神经网络的方法。
训练模型204的输出包括关节旋转和/或3D关节位置的预测分布。输出分布或分布用于确定一般人的三维模型的参数值。在各种实施例中，用户206的3D模型是经过调整的参数化人体模型，使得参数化人体模型的参数通过训练模型204输出的关节旋转和/或3D位置上的分布来定义。
......（全文 2833 字，剩余 2388 字）
注册用户请登入后阅读完整文章
映维会员、PICO员工、大朋员工可联系映维免费获取权限
