[分享] 計算攝影06-與電腦AI後製的差異

作者: eyecolor (欸)   2024-07-27 00:18:39
====================
iPhone 攝影時代 | 計算攝影06
計算攝影的AI為加速紀錄現場細節,
電腦版的AI後製為創造(偽造)細節。
====================
這邊主要是以iPhone的計算攝影而談。
前面第二大章為RAW檔測試主要是看計算攝影是否為無中生有,
所以對比單眼的RAW檔。
加上我人在現場拍攝,也有仔細對照跟人眼看到的細節有無一致。
結論是,
計算攝影並沒有偽造任何細節,主要AI單元是用來加速紀錄細節,
計算攝影的AI單元應用是為了紀錄更多現場細節而生。
這跟電腦版的修圖軟體AI走向不一樣,
電腦版的AI因為無法得知現場細節,所以電腦版的AI是以「偽造」細節為主。
所以只要進了電腦版的AI修圖,多少會出現偽造細節。
這是電腦版的AI與計算攝影的AI應用最大的差異點。
計算攝影的AI是在加速紀錄更多的現場拍攝細節。
計算攝影的AI是可以用手上的硬體去"看見"更多現場細節去紀錄。
電腦版的後製軟體的修圖AI,因為無法看到現場環境細節,
所以只能「創造」細節,會增加不少偽造的細節。
前面所提都是屬於正常拍攝模式下的計算攝影,
到了人像模式又有所不一樣了。
-人像模式-
所以人像模式是經過二次不同步驟。
第一個步驟是靠AI紀錄更多資訊。屬於計算攝影的紀錄細節。
第二個步驟是AI後製階段,靠獲得的細節資訊去偽造景深。
這樣子應該就會比較清楚了,
景深模擬這部分其實把這些資訊丟進電腦軟體去AI演算也是可以算出來的。
拍攝當下iPhone的AI是屬於加速"紀錄"細節。
獲得景深等資訊後,接下來的AI進入後製階段,偽造景深。
人像模式是整合二個步驟。
但這景深資訊是由前段AI提供細節參考,包含距離等等。
也就是計算攝影紀錄的越詳細,細節提供越多,
那麼在後製方面就可以猜得越正確。
所以在拍攝當下的計算攝影,
是不能夠偽造細節,否則將導致第二步驟的後製演算變成不舒服的照片,
將會脫離現實。
這就是為什麼拍攝當下的計算攝影的AI應用是不能應用在無中生有去生出細節,
而只能去加速紀錄細節的原因。
-月亮模式-
這個蘋果iPhone沒有,
但偽造細節這部份很多人會想起月亮模式。
其實對比模糊的月亮再去貼對應紋理,
這部分是用不上AI的,
只是一個很低級的自動後製而已。
如果專門訓練一個模型去偽造月亮紋理,我也認了,這就誇張。
但目前看來這不是訓練AI模型所做出來的事情。
===
-部分技術不到位的手機廠商,會將AI後製這階段偷偷納入計算管線-
因為這樣可以降低研發成本。
並且搭配B站博主等偷換概念,去宣傳計算攝影等同後製跟偽造。
這樣子方便他們減少研發成本,用簡單的AI後製去偽造細節。
由前面可以知道,這並非計算攝影的功用。
所以這部分我還是要特別提出來,以免很多人被不肖博主去偷置換觀念了。
=========================================
這部分我要很明確地給一個觀念。
計算攝影一定不能無中生有的生出細節,
所有細節必需是真實環境都要存在的。
=========================================
這個篇章只是讓不清楚的人知道差異的。
特別撰稿的。

Links booklink

Contact Us: admin [ a t ] ucptt.com