微软专利分享：为AR环境虚拟对象提供更好的光照效果
估计照明
（映维网Nweon 2024年07月20日）增强现实头显需要为现实世界视图叠加逼真的虚拟对象，而其中的光影照明非常关键。对于通过分析环境对象的图像来估计照明特征的系统，其面临至少两个技术挑战。第一，可能无法以足够的精度识别照明特征，尤其是对于具有高动态光强度范围的室外场景；第二，涉及复杂的图像处理。
为了提高系统执行实时推理阶段处理的能力，微软提出了一份名为“Estimating illumination in an environment based on an image of a reference object”，通过根据参考对象的图像来估计环境照明，从而帮助增强现实系统为虚拟对象应用适当的照明。
图1示出了用于训练环境编码系统104和对象编码系统106的训练系统102。环境编码系统104将环境图像映射到组合编码110。对象编码系统106将对象图像映射到另一组合编码114。
环境图像是指环境的数字图像或映射。环境包括或以其他方式展示一个或多个照明源的效果。例如，说明性环境图像108描绘了包括太阳116作为主要光源的室外场景。对象图像是指至少包含一个参考对象的图像。然后，参考对象由相应环境图像所描绘的环境中的光源照亮。例如，说明性对象图像112包括显著地以人类面部118为特征的参考对象。人类面部118显示了光照射到人类面部而引起的照明效果。由于上述关系，环境图像108和对象图像112形成相关的一对图像。
......（全文 3739 字，剩余 3266 字）
注册用户请登入后阅读完整文章
映维会员、PICO员工、大朋员工可联系映维免费获取权限
