前沿企业观察 | CREAL的光场技术能给AR市场带来什么?

IP归属:广东

在AR硬件市场中,光学方案历经多年迭代发展,似乎已经进入一个相对稳定的阶段,“Micro-OLED+Birdbath”、“Micro-LED/LCoS+光波导”成为主流。不过,在这以外,也有一些初创公司在尝试相对“冷门”的解决方案。

比如本文将提到的的瑞士创企CREAL,企业曾表示传统AR光学存在“硬伤”,因为它们均是伪3D,无法解决变焦等问题。企业正试图将光场技术引入AR眼镜,并给用户呈现更加自然的AR视觉观感。

图源:CREAL

什么是光场技术,它能解决什么问题?

CREAL成立于2017年,总部位于瑞士,成立以来一直致力于开发适用于VR、AR等设备的光场显示技术。Tomas Sluka是企业联合创始人兼CEO,曾是欧洲核子研究中心 (CERN) 和瑞士洛桑联邦理工学院 (EPFL)研究员 ,拥有深厚光学与物理背景。此外,CREAL不少团队成员具有Intel、Magic Leap等从业背景,具有较强技术实力。根据Linkedin数据,企业员工总数在11-50名区间。

CREAL所聚焦的光场技术,是一种旨在重建真实世界光线传播方式的显示技术,CREAL指出,“现实世界中的光可以被描述为一个连续的射线场,这些射线会被物理物体反射、折射或发射,并在自由空间中传播。现实空间中的每个点实际上都会将无限量的光线传输到无限的方向。数字光场是对其进行的工程模拟。”我们也可以简单将其理解为一种真3D表现方式。

目前市面上存在着部分光场相机产品,有别于传统相机,后者只能记录光线的强度和颜色,而前者还可以记录光线的传播方向等,值得一提的是,由于光场相机可记录景深,因而能够实现先拍照后对焦等操作。

奕目科技所推出的光场相机,图源:网络

除相机外,光场技术也可以应用于大屏、AR、VR等显示终端当中,如果进一步划分,市场上的光场屏幕可以大致分为两类:

1、被动型光场显示器:基于柱状透镜阵列、光栅、定制微透镜等方案的显示器,如Looking Glass等,这些设备基于特定结构预设了多个不同的角度以传播画面,从而可以实现裸眼3D显示效果。它们的光线发射角度不可调,并且光效损失相对严重。

图源:Looking Glass

2、主动型光场显示器:采用空间光调制器(SLM)、MEMS微镜阵列等组件,可以更加精细地调整显示区域像素点的光线传播方向,最终获得自然观感。CREAL团队所采用的也是该方案,其智能眼镜所采用的光学组件是 FLCOS SLM + HOE薄膜光学模组。

图源:CREAL

为何要引入光场?

在一些人看来,光场技术可以解决裸眼3D观看的问题,因而它在教育培训、展陈展览等市场中具有独特的价值。而VR/AR已经可以借助双眼视差获得3D观看效果,从这个角度来看光场技术之于VR/AR”迫切程度“似乎没有太大。

不过,如今大多数VR/AR类产品的常见问题在于,它只能实现单一固定焦面显示,很多时候虚像没办法匹配真实场景。(AR眼镜常见的虚像距离大概在1.5-3米区间)

举例而言,如果你想要将2米焦平面的虚像锚定在近距离的手掌,传统方案下,如果你看着双手,虚像则会处于虚焦状态。这样眼睛在获取信息时需要来回“拉风箱”,体验并不好。此外,这可能会导致辐辏调节冲突(VAC),长时间观看会产生视觉疲劳、头晕恶心等不适感。

相比之下CREAL光场方案可以随意切换远近视角,而窗口始终具有出色的显示效果。CREAL在其官网表示该方案可以实现自然视觉,并获得“完全正确、健康的视觉体验。”

图源:CREAL

今年AWE期间CREAL有所展出,VR陀螺在现场体验了相关产品原型,Tomas在现场通过一个可变焦的相机镜头模拟人眼并配合手势识别抓取虚拟物体进行了演示,普通显示方案下无法切换到多个焦面,精准的抓取到虚拟物体,而其演示的光场方案下,可以切换多个焦面,而被抓取的虚拟物体也可以任意改变其位置距离。

图源:CREAL

这里说个题外话,对于虚实结合场景,市面上有VST以及OST两种方案,两者分别对应MR以及AR,如果从技术原理来看,VST的画面由摄像头采集并合成画面,OST则是将虚拟画面以“贴纸”的方式呈现在真实世界当中,因而OST方案会更容易出现VAC问题。

为什么光场是路线优选?

除光场外,市面上还存在一些改善/解决以上所提到的VR/AR焦面单一问题的技术方案,比如说多焦面、动态变焦等。CREAL在其《AR中的自然视觉》白皮书中对这几种技术路线进行了对比,并表示光场方案可能是商业化落地的最佳选择之一。

多焦面显示:旨在为设备引入多个深度平面,如Magic Leap 1代设有两个焦平面,设备可以基于眼动数据启用某个更加匹配的虚拟屏幕。

LightSpace曾展示过一款含4个焦平面的AR眼镜原型,其基于liquid-crystal diffuser stack+ 高刷高速投影器进行时间复用显示。不过该解决方案光学系统相对复杂。

图源:网络

变焦显示:采用变焦光学元件以及眼动追踪实时匹配观看画面,Meta此前也展示过该方案的头显原型(代号为Butterscotch Varifocal)。CREAL表示该方案需要对光学模糊和眼部视差进行数字模拟,但是眼动追踪可能存在精度、响应时间和可靠性等限制,至于是否具有中期以及长期技术优势还有待观察。

计算全息(CGH):利用相位型空间光调制器来重建目标光波的离散近似,理论上这是最理想的解决方案,不过目前它还有很多局限,如画质不稳定、对温度和电压高度敏感、刷新率低、计算量大等。该方案仍停留在实验室阶段。

综合对比来看,CREAL认为其光场技术可能是应对AR设备的VAC等视觉挑战较为理想的解决方案之一。

值得注意的是,CREAL采用的是顺序光场(Sequential light field),即通过sequential timing(时间分帧)来合成多视点图像,从而在人眼处形成具有视差信息的光场。有资料指出,与空间光场显示器相比,顺序光场显示器可以提供更高的角度分辨率(更多视点),同时又不会牺牲单个图像的空间分辨率。

光学原理方面,CREAL系统基于2D针光阵列作为光源,光线经过光调制器处理,然后经过全息薄膜最终投射到视网膜上。其中里面投射的每条光线都携带着低分辨率的图像,调制器确保眼睛中的每个视点都能接收到特定的图像视角。CREAL表示其方案有36个视角,图像投射帧率达到了惊人的6500Hz。(注:参数会随原型迭代有所改变)

最后,视网膜会将来自多个视点的低色彩分辨率图像组合成一张完整图像,而大脑会“脑补”并进一步提升画面分辨率。

VR陀螺从业内专家口中了解到,CREAL的方案为视网膜显示,跟传统显示的区别在于它是一种扫描式的显示,相当于投屏模式。由于它是扫描式,所以其景深比较深,并且有变焦的可能性,或者其焦本身就有比较大的范围,但该方案有诸多受挑战的地方,如光场显示的数据处理、显示质量提升、光学设计以及成本与能耗等。

CREAL光学示意图,视频来源:Youtube

正处于落地前夜,CREAL的商业化进程

2022年,Tomas Sluka在接受采访时曾提到,CREAL核心目标并非成为一家硬件制造商,而是想要成为光场技术方案供应商。自成立以来,企业一直致力于克服光场技术所面临的模组体积、光效、计算量、成本等系列问题并最终将其引入消费市场当中。

进一步小型化

关于模组体积,这里可以简单参考企业展示的产品路线图,CREAL最早期的原型为一个小方盒形状,它根本没办法作为头戴式设备使用。到了2021年,企业展出了两款可穿戴设备原型,关于头显,它采用类似Varjo的双屏设计,视野中央30°范围采用1000×1000px分辨率的光场显示,外围区域则采用1600×1440的常规显示。AR眼镜外观则类似于HoloLens,支持60° FoV、分辨率1000× 1000px的显示效果。

图源:CREAL

2024年,CREAL发布了一款定制光场调制器(FLCOS),为模组瘦身,并让AR眼镜能够进一步小型化。下图是其最新的产品原型,此时它已经非常接近一款AR眼镜形态,只不过由于镜腿内侧需要放置光机,整体看起来还是有些突兀。CREAL官网的最新产品计划表中,企业计划在2026年进一步降低光引擎的体积,并提升Eyebox。

值得一提的是,由于CREAL的方案采用的是HOE薄膜,这还带来了额外的好处:它能够与传统近视镜片贴合,并且透过率、彩虹纹等也会优于波导方案,眼镜正面观感十分自然。

图源:CREAL

下图是CREAL官网所展示的AR解决方案规格表,可以发现光场在显示效果方面仍存在对比度较低、色彩表现较弱等显示问题。此外,CREAL在一些文章中也曾提到当虚像距离眼睛<20厘米,清晰度会存在问题、调制器光效弱于LBS、Micro-LED等,这些有待后续进一步改善。

CREAL AR产品的技术规格表,图源:CREAL

应用生态搭建

光场显示与常规显示的渲染策略并不相同,因为光场显示需要处理多个方向、多个焦距的复合光线场信息,对于一些常见的3D模型、3D游戏等体验,光场类AR设备需要进行格式转换才能观看。

为了改善这一问题,CREAL曾在去年推出了与Open XR兼容的驱动程序,这使得CREAL的光场技术能够无缝集成到各种XR应用和体验中,有效提升了技术的适用性。

图源:CREAL

与蔡司合作应用于视光市场

据不完全统计,CREAL创办至今共计获得了12轮投资,共计筹得超过2300万美元的资金。投资方包括Verve Ventures、蔡司等。其中蔡司分别在去年9月以及今年7月对企业进行了投资,最新一笔资金890万美元。

之所以蔡司对CREAL“情有独钟”,正是看中了光场技术在视光领域的应用潜力。去年,CREAL曾宣布,“与蔡司合作旨在打造一个数字化视力保健平台,彻底革新现有的视力诊断和治疗流程。蔡司将利用CREAL的光场显示技术,向市场推出能够进行眼部状况数字化检查以及传统眼镜片、隐形眼镜等模拟的设备。”

CREAL的真3D显示器将能够对任何物理或理论晶状体进行数字化复制,允许根据任何年龄段/客户群体定制测试程序,并支持自动化内容的投影,从而整体上减少对临床资源的需求。根据CREAL公告,笔者推测相关产品最快可能会在明年落地。

图源:CREAL

结语

从体验的角度来看,由于光场技术能够提供更加自然的观感,并且能够解决VAC等问题,因而应用于AR眼镜会有其独特的产品吸引力。

当然,光场技术也面临性能开销大、分辨率不佳、模组成本偏高等问题。而对于VAC是否是当前AR眼镜的核心痛点,这还有待观察。如Magic Leap也曾提到,基于合理的虚像焦距设计(1.5-2米)以及一些视觉线索模拟,可以一定程度改善VAC问题。

光场技术有其技术合理性以及优越性,但是否是未来的优胜解法,还得交由市场进一步检验。

快速空间光调制器

企业融资

此前企业曾经瞄准VR显示,但是早些时候有些人评论称基于FLCoS方案的VR会是一个死胡同,原因在于它没办法解决高速运动下不可避免的伪影

优势

小型化的努力(PIC合作)

陀螺科技现已开放专栏入驻,详情请见入驻指南: https://www.tuoluo.cn/article/detail-27547.html

VR陀螺专栏: https://www.tuoluo.cn/columns/author1286744/

本文网址: https://www.tuoluo.cn/article/detail-10123900.html

免责声明:
1、本文版权归原作者所有,仅代表作者本人观点,不代表陀螺科技观点或立场。
2、如发现文章、图片等侵权行为,侵权责任将由作者本人承担。

相关文章