专为夜间使用设计的高动态性能相机，结合了人工智能图像处理（AI-ISP）技术

《The Computer Journal》：High dynamic camera design for night use combined with AI-ISP

本文提出一种轻量级端到端AI-ISP网络，通过基础特征提取模块和动态权重调节模块解决低光图像修复中过饱和与高参数问题，并基于高动态图像数据集优化模型，实现RK3588平台实时处理（24fps），有效提升暗部细节与高光抑制性能。

　　

摘要

近年来，人工智能图像信号处理器（AI-ISP）在低光图像恢复领域受到了广泛关注。现有的大多数低光恢复方法主要集中在增强暗部区域，这往往会导致场景中明亮区域的过度饱和。此外，许多模型参数数量过多，使其不适用于实际应用。为了解决这些问题，本文提出了一种轻量级的端到端AI-ISP网络。该网络包括一个用于集成图像特征提取的基础模块和一个用于处理图像中高动态范围的权重调制模块，从而实现低光恢复和眩光抑制功能。此外，还构建了一个专门的数据集，其中包含高动态范围的图像效果，以支持所提出的AI-ISP网络的训练，从而提高其在夜间应用中的性能。本研究还讨论了模型剪枝、量化和并行加速策略，并结合了进程池来优化计算效率。所提出的算法已成功部署在RK3588嵌入式平台上，开发出一种高动态范围的夜视相机。实验结果表明，这种基于AI-ISP的夜视相机可以从分辨率为1×768×1024的RAW图像中恢复低光细节，帧率为约24帧/秒，同时具备出色的眩光抑制和高动态范围性能。