苹果AR/VR专利提出基于机器学习推断着色技术生成Avatar
推断着色
（映维网Nweon 2024年07月20日）由于设备性能的限制，目前的Avartar系统通常无法传达细微的面部表情或情绪状态。所以在名为“Inferred shading”的专利申请中，苹果提出了一种利用基于机器学习的推断着色技术来生成Avatar。
为了生成逼真的Avatar，可以根据特定的环境点亮脸部的纹理。在一个或多个实施例中，可以训练推断着色网络来映射照明值、几何表情模型、头部姿势和camera角度，以产生根据与照明值相关联的环境照明的纹理。
您需要登录才能阅读此处PDF文件
在一个或多个实施例中，可以通过在具有各种照明变化的各种环境的图像训练自动编码器来获得照明值，从中可以确定表示场景中的照明和颜色的环境latent。这个过程包括训练阶段和应用阶段。
第一阶段涉及训练基于环境图像数据的环境自动编码器。捕获或以其他方式生成各种照明环境的一系列图像，以便在环境和场景中如何分布照明之间获得ground truth数据。在一个或多个实施例中，可以使用合成图像。
......（全文 3860 字，剩余 3500 字）
注册用户请登入后阅读完整文章
映维会员、PICO员工、大朋员工可联系映维免费获取权限
