北 纬 三 十 度
网络科技有限公司

Facebook开源自家黑科技:实现VR中眼球追踪、切换焦点

1.jpg



模拟真实的目光变焦

DeepFocus是Facebook的AI驱动的渲染器,它能够追踪眼球实时判断焦点,并选择性地模糊和清晰事物。就在最近,Facebook宣布,DeepFocus技术将会面向公众开源。虽然该公司的广阔视野(FOV)原型机Half Dome可能是其专有的,但它们的深层学习工具是与硬件无关的。

2.jpg

当你把手举到面前时,你的眼睛自然地会聚和适应,将目光聚焦在你的手上,虚化后面的背景。然而,在今天的VR眼镜中,并不能实现这种效果,因为光线来自固定光源,使你的眼睛聚焦在很近的地方以分辨近场图像。


保持超清晰分辨率

与传统的用于基于深度学习的图像分析的人工智能系统不同,DeepFocus在处理视觉的同时,还保持了高质量VR所需的超清晰图像分辨率

3.jpg

这意味着,在变焦VR耳机,甚至带有光场显示器的AR耳机中,不仅让事物看起来更现实,还能减轻与聚焦调节冲突相关的眼疲劳

Facebook的研究人员说道:

“这个网络被证明能够精确地合成散焦模糊、焦距叠加、多层分解以及多视图图像,仅使用通常可用的RGB-D图像,从而能够实时地、近乎正确地描绘视网膜模糊,并具有广泛的支持调节的HMD。”

Facebook在一篇博客文章中表示,Facebook将发布源码和神经网络训练数据:“用于开发新的VR系统的工程师、视觉科学家和其他研究感知的研究人员。”

Facebook开源的工作和数据集下载网址:https://github.com/facebookresearch/DeepFocus

联系电话:13915548402

工作时间:周一至周五:8:30 - 17:30
地址:江苏省苏州市工业园区新平街388号腾飞科技创新园塔C602
ABUIABACGAAghKKB3QUo9O6L9AUw_QI49wI

   关注我们:

更多信息请下载案例介绍:
靴子猫案例及产品介绍.pdf
35.78MB下载