空 挡 广 告 位 | 空 挡 广 告 位

谷歌AR/VR专利提出根据用户注视点确定聚焦波束成形方向

查看引用/信息源请点击:映维网Nweon

根据用户注视点来确定聚焦波束成形的方向

映维网Nweon 2024年07月20日)对于支持语音到文本转录功能的AR眼镜,由于搭载的是全向麦克风,区分不同方向的声音相当困难,从而导致语音到文本的转录不准确。尽管波束成形可以将麦克风阵列的整体灵敏度聚焦到特定方向,从而帮助区分不同方向的声音,但在判断聚焦方向时依然存在挑战。

所以在名为“Foveated beamforming for augmented reality devices and wearables”的专利申请中,谷歌提出可以根据用户注视点来确定聚焦波束成形的方向。

其中,可以通过跟踪用户的一只或多只眼睛来确定,以确定他们稳定而专注地看在哪里。这种眼睛跟踪波束成形(即中央凹波束成形)可以用于增强来自用户正在观看的方向(即凝视方向)的声音,并抑制来自其他方向的声音。

当使用波束成形音频时,语音到文本算法可以更准确和梗相关。另外,通过从注视方向突出显示语音,可以使语音到文本的文字记录更容易理解。

......(全文 3290 字,剩余 2945 字)

注册用户请登入后阅读完整文章
映维会员、PICO员工、大朋员工可联系映维免费获取权限

本文链接https://scc.nweon.com/1973
转载须知:转载摘编需注明来源映维网并保留本文链接
素材版权:除额外说明,文章所用图片、视频均来自文章关联个人、企业实体等提供
QQ交流群苹果Vision  |  Meta Quest  |  微软HoloLens  |  AR/VR开发者  |  映维粉丝读者

您可能还喜欢...

SCC