Appleの研究、AIが低照度写真をどのように改善できるかを示す - 9to5Mac
概要
Appleの研究者たちは、パデュー大学と協力し、極端に暗い低照度のRAW画像を大幅に強化するためのDarkDiffというAIモデルを開発しました。従来の処理方法はノイズ除去により過度に平滑化したり、ディテールを失わせたりすることがありました。DarkDiffは、Stable Diffusionに似た事前学習済みの生成拡散モデルを、単なる後処理ではなく、カメラのイメージシグナルプロセッサ（ISP）パイプラインに直接再配置することで、この問題に対処します。これにより、モデルは局所的な画像パッチにわたるアテンションを計算することで、RAWセンサーデータから詳細なディテールと正確な色を復元し、ハルシネーションを軽減できます。DarkDiffは知覚品質において最先端の手法を上回りますが、研究者たちは計算要件が高いため、すぐにデバイス上でローカルに実行するのではなく、クラウド処理が必要になるだろうと指摘しています。この研究は、Appleの計算写真技術の進歩への継続的な注力を示しています。
(出典：9to5Mac)