上海人工智能实验室超广角裸眼3D显示,AI代替眼镜感受视觉深度
发布时间:2025-12-08 15:56 浏览量:1
编辑丨&
科幻片里,经常能看到这样的画面:主角伸手就能触碰到悬浮在空中的三维投影,提供装备或者地图设计。但如果,没有 3D 眼镜,没有头戴设备,只靠一个普通屏幕,你就能感受到深度呢?
这个画面,对很多人来说一直只是「科幻」。因为几十年来,裸眼 3D 技术都被一个叫做 「空间–带宽积 (Space-Bandwidth Product, SBP)」 的物理规律拖住——要么画面大,要么视角宽,从来无法同时满足。
但新系统 EyeReal,它的研究团队通过 AI 算法 + 多层 LCD 面板 + 实时眼动追踪,展示了历史上第一次:桌面级大小 + 超过 100° 宽视角 + 高画质 + 裸眼 3D。
相关研究内容以「Glasses-free 3D display with ultrawide viewing range using deep learning」为题,于 2025 年 11 月 26 日发布在《Nature》。
论文链接:https://www.nature.com/articles/s41586-025-09752-y
现实可能比科幻来得更快
传统裸眼 3D 技术,无论是全息、光场还是多视点显示,都面临同一个基础制约:它们必须构造或传递足够密集、对应不同观察角度的光线,以确保当你头动、眼动时,画面仍能保持立体与连贯。光场本质是一个高度复杂的三维光线集合,信息量庞大。
但现实光学设备的制造能力、显示分辨率、带宽与光线发射密度,都极难同时覆盖「高清晰度 + 宽广视角 + 大尺寸显示」。因此,多年来市面上能够大规模普及的裸眼 3D 屈指可数,更多还停留在「需要精确视角、画面小、适合单人观看」的实验性玩法。
而在 EyeReal,上海人工智能实验室、上海创新研究院、复旦大学携手提出了新的思路:
放弃试图一次性生成「适合所有观察角度」的全光场;而是通过 实时追踪观看者眼睛与头部的位置,动态计算当前最佳光线分布;并通过 LCD 面板「叠加」 的方式,利用 AI 优化光线传播,将「正确的光束」精准送到双眼 —— 而不向其他方向 wasted 光能。图示:EyeReal 方法用于光场生成。
实际观看几何中,双眼被视为平行于地面且朝向广场中心的针孔相机模型,通过针孔成像和透视变换推导六维(6D)位姿矩阵作为任何双目观看的眼部几何编码的物理建模基础。
而光场显示则采用多层结构,使用相位变化来编码光场不同深度区域的光学信息,与强度调制相比,由于其乘法衰减特性,具有更高的光学效率。
最后,团队训练了一个轻量级卷积神经网络,以基于平面变形高效计算光模式,并通过结构化光损失函数进行优化。
打开裸眼 3D 之门
理想的自动立体显示依赖于立体视觉、运动支持与调节等关键属性。这其中,运动支持对应连续的运动视差,使沉浸式 3D 感知实现无缝过渡。
对于这点,团队除开基本的双眼合成之外,还评估了 EyeReal 生成感知完整 3D 观看所需的立体视差维度完整空间范围的能力。EyeReal 并未牺牲某些视察维度,故而它能在各种运动方向和空间轨迹上保持持续稳定的输出。在多方向输入下,它展现出高度稳定、视差一致的预测,涵盖水平、垂直和径向维度。
图示:EyeReal 的全视差自动立体显示演示。
为了证明他们的原型机工作正常,研究团队使用详细的计算机生成场景和真实世界照片对其进行了测试。他们确认该系统提供了超过 100° 的观看角度和完整的 3D 体验,这意味着图像清晰,并且随着用户移动眼睛和改变焦点时能够完美适应。
EyeReal 确保了在眼睛周围的广阔区域内具有高质量的一致性和可变运动容忍度,为沉浸式 3D 观看提供了坚实的基础。它在未见过场景和新头部姿态上同样有着稳健发挥,能够在各种观察变化中保持稳定的渲染质量。
图示:EyeReal 和被动 SBP 利用模型在大规模显示器中的多级一致性性能评估。
通过精确的双目建模,EyeReal 在所有视场范围内都表现出优越的性能。此外,EyeReal 实现了实时运行时速度,同时保持高性能,在亚秒范围内与之前的代表相比,速度提高了一到两个数量级。
裸眼+智能
EyeReal 的方法论建立在物理原理与 AI 数字模型之上,利用具有眼球几何编码的神经网络,实时计算眼睛周围的理想光场,实现动态最优的 SBP 利用。其通过持续的计算最大化可用光信息的有效使用率,在现有物理限制中实现了大成像尺寸与宽观看角度的实用共存。
采用 AI 的驱动策略为下一代商业+学术的无眼镜 3D 应用提供了一条经济实用的途径。团队相信他们的策略仍有扩展的空间,比如说利用集成时分复用和定向背光等技术,实现多用户适应的可能。
当这个设想真正普及,屏幕将不再是平板,而是一扇通往深度世界的窗口。
相关报道:https://techxplore.com/news/2025-12-scientists-glasses-free-3d-ai.html