【光学前沿】元成像相机:开启单目深度感应新纪元

      在众多领域,如机器人技术、增强现实和自动驾驶等,深度感知技术扮演着至关重要的角色。传统的单目深度感知技术受限于成本、体积和性能,而新型的元成像相机提供了一种高精度且鲁棒的单目深度感知解决方案。本文将详细介绍清华大学自动化系戴琼海院士和乔晖副教授团队开发的元成像相机,以及其在单目深度感知领域的突破性进展。

 

【光学前沿】元成像相机:开启单目深度感应新纪元


    深度感知技术是理解和交互三维世界的基础,尤其在自动驾驶、无人机控制、增强现实等领域中发挥着关键作用。传统的单目深度感知技术通常依赖于图像中的透视和遮挡等相对深度线索,但由于缺乏绝对深度信息,其精度和鲁棒性受限。光场相机虽然能够提供深度信息,但其较低的空间分辨率和易受光学像差影响的特性限制了其应用。


    最近,清华大学的研究团队提出了一种新型的元成像相机,该相机集成了主透镜、微透镜阵列、CMOS传感器和压电位移台,通过扫描机制有效克服了空间分辨率和角度分辨率之间的矛盾,提升了子孔径的空间分辨率。这种设计不仅使得子孔径之间的视差能够携带深度信息,而且每个子孔径内PSF图案的变化也能携带一定的深度信息。此外,高分辨率的子孔径图像使得元成像相机能够通过数字自适应光学技术(DAO)实现多点像差校正,即使在存在像差的情况下,也能高效地捕获深度信息,确保准确和鲁棒的深度感知。


    实验结果表明,元成像相机在1米至3.5米的测试范围内达到了平均0.03米的绝对误差和1.7%的相对误差,显示出其卓越的深度感知能力和增强的对信号背景比变化的稳健性。这一成果极大地拓展了单目深度感知在自动驾驶、虚拟现实等领域的应用前景。


    除了用于单目深度估计外,元成像相机还可以代替当前立体视觉系统中的2D相机,提升立体视觉系统的深度感知性能。此外,元成像相机凭借其对像差的强鲁棒性,弥补了被动式深度感知方法在长距离深度感知时的精度和鲁棒性不足,从而有潜力进一步拓展被动式深度感知在长距离场景中的效果。


    清华大学研究团队开发的元成像相机以其高精度和鲁棒性,为单目深度感知领域带来了革命性的突破。这种新型相机不仅在更宽的深度范围内表现出比光场相机更高的精度,而且对信号背景比变化具有出色的鲁棒性。模拟和实验深度估计结果进一步证实了元成像相机在光学像差引起的挑战性条件下的稳健性和高精度。随着技术的不断发展,元成像相机有望在自动驾驶、无人机和机器人等挑战性场景中发挥重要作用,为未来远程被动深度感应的发展开辟新途径。

创建时间:2024-10-30 14:27
浏览量:0

▍最新资讯