Tag: DarkDiff

iPhone夜拍救星?蘋果研究人員提出名為「DarkDiff」黑科技,將生成式擴散模型塞進相機ISP

iPhone夜拍救星?蘋果研究人員提出名為「DarkDiff」黑科技,將生成式擴散模型塞進相機ISP

雖然iPhone的夜拍模式 (Night Mode) 已經相當成熟,但面對極低光源或是手抖造成的模糊,物理光學的限制仍在。不過,蘋果研究人員似乎找到新的解法,根據近期公布的研究論文,將透過名為「DarkDiff」的AI影像技術,試圖利用生成式AI來重塑低光源攝影的規則。 什麼是「DarkDiff」?把「生圖AI」拿來修照片 蘋果研究人員指出,「DarkDiff」的核心概念相當大膽:它將目前生成式AI領域最熱門的擴散模型 (Diffusion Models),也就是類似Midjourney或Stable Diffusion用來「無中生有」的生圖技術直接整合進相機的影像訊號處理器 (ISP) 運作流程中。 不同於傳統的降噪演算法 (容易把細節抹平變成油畫感),「DarkDiff」利用擴散模型的特性,能夠在極低光源的條件下,「識別」且「重建」出遺失的紋理與細節。簡單來說,它不只是把雜訊拿掉,還能透過AI運算,有效地修復因光線不足導致的動態模糊 (Motion Blur),讓照片看起來更清晰銳利。 運算攝影 (Computational Photography) 的下一個階段 目前蘋果的光像引擎 (Photonic Engine) 主要依賴Deep Fusion多幀合成技術,透過疊合多張不同曝光的照片來提升畫質。而「DarkDiff」的出現意味蘋果打算更進一步從「合成」走向「生成」。 要在手機的ISP內即時運行擴散模型,對硬體算力是極大的考驗。這顯然也間接暗示明年預計登場的iPhone 18 (或是其搭載的A20處理器),勢必得在NPU與ISP的協同運算效能上有顯著提升,才能在使用者按下快門的瞬間完成這些複雜AI推論。 分析觀點:真實與美感的拉鋸戰 而「DarkDiff」技術的曝光,象徵手機攝影進一步跨入「生成式攝影」 (Generative ...

Welcome Back!

Login to your account below

Retrieve your password

Please enter your username or email address to reset your password.