Apple 研究显示 AI 如何改善低光照片 - 9to5Mac

9to5Mac
Apple 研究人员开发了 DarkDiff AI 模型,通过将扩散模型集成到相机 ISP 中,极大地改善了极暗照片。

内容摘要

苹果研究人员与普渡大学合作开发了一个名为 DarkDiff 的 AI 模型,旨在显著增强极暗的低光原始图像。传统方法因降噪而导致过度平滑或细节丢失。DarkDiff 通过将预训练的生成扩散模型(类似于 Stable Diffusion)直接重新定位到相机图像信号处理器 (ISP) 管道中来解决此问题,而不是仅进行后期处理。这使得模型能够通过计算对局部图像块的注意力来理解并恢复原始传感器数据中的精细细节和准确颜色,从而减轻了幻觉。尽管 DarkDiff 在感知质量上优于最先进的方法,但研究人员指出其计算要求很高,可能需要云处理而不是很快在设备上本地运行。这项研究突显了苹果在计算摄影进步方面持续的关注。

(来源:9to5Mac)