高通专利分享用面部landmark信息优化AR/VR面部追踪
利用面部landmark信息来优化表情识别的方法
(映维网Nweon 2024年07月20日)从Pico到Meta,一系列的VR头显厂商都在积极探索面容追踪技术,从而进一步提升用户的沉浸感水平。致力于为行业提供开发者工具和参考设计的高通同样有在研发相关领域。
在名为“Facial expression recognition”的专利申请中,高通就介绍了一种可用于AR/VR的面容追踪技术。具体来说,发明描述了一种利用面部landmark信息来优化表情识别的方法。
面部表情识别和面部landmark检测是面部分析系统执行的两个重要任务。面部表情识别涉及图像帧中描绘的面部表情的自动分类和/或估计。
面部landmark检测则涉及定位图像帧中的关键点位。关键点位可以包括眼角、嘴角、鼻尖和其他。检测到的面部landmark位置可以表征和/或指示面部的形状。
尽管面部表情和面部landmark检测技术存在相关性,但它们通常针对单独的任务实现,并输出不同类型的信息。
高通提出的发明可以为面部表情识别系统提供利用面部landmark检测技术的能力,从而实现更准确和更有效的面部表情识别。例如,面部表情识别系统可以使用3DMM技术来确定与图像帧的landmark特征相关联的信息,并将landmark特征信息作为输入,以执行面部表情识别。
......(全文 3598 字,剩余 3169 字)
注册用户请登入后阅读完整文章
映维会员、PICO员工、大朋员工可联系映维免费获取权限