Snap专利为手机AR滤镜提出更好的人体网格处理方案
生成人体网格，并根据人体网格变形外部网格
（映维网Nweon 2024年07月20日）可爱狗耳朵，害羞的红晕，炫丽的烟花，你或许不会对诸如Snapchat等应用的AR滤镜感到陌生。为了改进AR图形的放置和定位，系统检测图像或视频所描绘的人员，并生成表示骨骼的rig。然后，可以根据rig的移动变化调整AR图形。
在AR滤镜方面富有经验的Snap认为，由于上述方法需要实时生成一个人的rig来调整AR图形放置，这增加了处理复杂性、功耗和内存需求。另外，rig仅表示图像或视频中人的骨骼或骨骼结构运动，不考虑人员的任何外部物理属性，例如重量和皮肤属性等。
针对这个问题，团队在名为“Deforming custom mesh based on body mesh”的专利申请中提出一种通过生成人体网格，根据人体网格变形外部网格的方法，从而提高诸如智能手机这样设备的使用效率。
Snap表示，通过基于对所描绘对象的身体网格的改变来变形外部网格，可以更有效地将一个或多个视觉效果应用于人像，无需生成rig或骨骼结构。特别地，发明可以将一个或多个增强现实元素应用于图像或视频中描绘的人或对象，然后基于由对象身体网格的改变所来修改一个或更多个增强现实元素。
......（全文 3593 字，剩余 3168 字）
注册用户请登入后阅读完整文章
映维会员、PICO员工、大朋员工可联系映维免费获取权限
