Enabling High-Quality In-the-Wild Imaging from Severely Aberrated Metalens Bursts
Debabrata Mandal, Zhihan Peng, Yujie Wang, Praneeth Chakravarthula
我们使用超薄纳米光子金属相机应对坚固,狂野成像的挑战。 Meta-lenses由纳米级散射器的平面阵列组成,与传统屈光光学相比,其尺寸和重量都会显着减少。 然而,严重的色差、明显的光散射、窄光谱带宽和低光效率继续限制其实际采用。 在这项工作中,我们提出了一种用于野生成像的端到端解决方案,该解决方案将金属体比传统光学器件薄几倍,具有针对实用金属相机优化的定制多图像恢复框架。 我们的方法集中在一个轻量级卷积网络上,与一种记忆高效的突发融合算法相结合,该算法自适应地纠正噪声,饱和剪切和快速序列中的镜头引起的扭曲。 对各种真实世界手持捕获的广泛实验表明,我们的方法始终优于现有的突发模式和单图像恢复技术。 这些结果指向了在日常成像应用中部署基于金属的相机的实用路线。
We tackle the challenge of robust, in-the-wild imaging using ultra-thin nanophotonic metalens cameras. Meta-lenses, composed of planar arrays of nanoscale scatterers, promise dramatic reductions in size and weight compared to conventional refractive optics. However, severe chromatic aberration, pronounced light scattering, narrow spectral bandwidth, and low light efficiency continue to limit their practical adoption. In this work, we present an end-to-end solution for in-the-wild imaging that pa...