[討論] 關於XR的單鏡頭景深/人像功能

作者: subgn ( )   2018-09-15 10:09:31
很多人關心的是XR雖然號稱與其他兩個同梯同樣有景深與人像攝影功能,
但是只有單鏡頭會不會比較弱,我認為可以從Developer網站裡看出一些端膩
https://tinyurl.com/ydbkxguh
On iOS devices with a back-facing dual camera or a front-facing TrueDepth
camera, the capture system can record depth information.
意思是只有雙鏡頭或是TrueDepth鏡頭才能獲得深度資訊。
我們已經知道XR後鏡頭是單鏡頭了,那他是不是TrueDepth呢?
官網關於XR的介紹
https://www.apple.com/iphone-xr/cameras/
如果你先轉到英文版網頁再去看XR的相機介紹,你會發現只有前鏡頭是
「7MP TrueDepth front camera」
但是後鏡頭就只有寫「12MP rear camera」
所以很明顯後鏡頭沒有TrueDepth,沒辦法靠鏡頭處理深度資訊
所以後鏡頭拍出來的照片應該是靠軟體來推算出影像中的深度資訊
至於軟體效果跟硬體效果的差距有多少,可能就有待專業評測網站測試了。
另外可以再回去看去年發表會裡的一個影片
https://developer.apple.com/videos/play/wwdc2017/507/
提到iPhone 7的雙鏡頭如何計算出景深
(可以直接去下載投影片看34頁開始的地方)
作者: yellowocean (walk to the sea)   2018-09-15 10:18:00
效果一定有差啊,不然何必雙鏡頭,但是至少把軟體景深的功能下放了,其實軟體可解,下放到8跟7應該也可以,只是這樣新手機就不用賣了……
作者: onollll (onollll )   2018-09-15 10:32:00
靠神經網路A12是八核心 11只有雙核心A12 單鏡頭能夠人像是因為背後有八核心的神經網路A11根本沒辦法做到單鏡頭人像 神經網路 差好幾倍
作者: eyecolor (欸)   2018-09-15 10:35:00
可以啦...蘋果不下放而已....
作者: onollll (onollll )   2018-09-15 10:36:00
樓上 你自己去查A12跟A11神經網路差幾倍你就知道為何蘋果不下放
作者: eyecolor (欸)   2018-09-15 10:37:00
那沒差啦...演算這個又不需要什麼深奧技術
作者: onollll (onollll )   2018-09-15 10:39:00
https://i.imgur.com/D9B579u.jpg重點標出了 你看不懂我也沒辦法
作者: eyecolor (欸)   2018-09-15 10:40:00
跟你說沒差還不信 XDDD
作者: onollll (onollll )   2018-09-15 10:40:00
建議你去查A11跟A12 神經網路差在哪
作者: siegfriedlin (齊格飛)   2018-09-15 10:40:00
等focos更新比較快 依蘋果的慣性,一定不滿意簡單計算的結果
作者: kivan00 (Kivan)   2018-09-15 10:43:00
就算蘋果不下放 反正過陣子第三方APP就會仿出類似的東西
作者: onollll (onollll )   2018-09-15 10:43:00
算了 懶得跟你說 A11跟A12差別搞不清楚 在辯下去也只是鬼打牆
作者: eyecolor (欸)   2018-09-15 10:44:00
舉例一下..你以為Animoji需要face ID的結構光技術?No..一顆鏡頭就可以Animoji..我把結構光遮光只剩一顆鏡頭...照樣可以Animoji
作者: siegfriedlin (齊格飛)   2018-09-15 10:46:00
投影片第86頁,有可能是啟動OIS機制→造成optical center位移→產生disparity→計算z depthdisparity越小,z depth誤差越大,所以需要神經網路cover?
作者: fiiox3 (飆速宅男)   2018-09-15 10:49:00
那pixel怎玩的?pixel有多加晶片?
作者: gy6543721 (元氣小饅頭)   2018-09-15 10:54:00
蘋果就是喜歡拿一些無關緊要的科技來唬人 偏偏有些人就是會被唬 沒在思考沒在瞭解科技還指責別人不懂蘋果 這種人非常多
作者: eyecolor (欸)   2018-09-15 10:54:00
作者: ohmylove347 (米特巴爾)   2018-09-15 11:01:00
on大的消息源在哪?只有說可以用在那些方面就代表那些方面一定有用到?這是屬於上對下的問題了
作者: JuiFu617 (小夫)   2018-09-15 11:01:00
手機的景深什麼的還不都是模擬合成來的,要淺景深去買單眼好嗎?
作者: eyecolor (欸)   2018-09-15 11:02:00
會持續加強AI神經網路的演算能力.為的是自駕車手機這種小應用..A11就夠用了啦
作者: jasonpttt   2018-09-15 11:08:00
坦白說,很多技術我相信只是蘋果的商業策略考量不願意下放而已
作者: eyecolor (欸)   2018-09-15 11:19:00
圖像分析都是為了自駕車而來.需要快速演算的神經網路AI手機需要判斷的資訊量沒那麼大..所以A11其實夠用完全是商業考量不下放罷了不然難道說其實A11我們也有這功能喔? 那誰還來買A12?
作者: ooxxboy (ooxxboy)   2018-09-15 11:37:00
其實單鏡頭本來就能用後製做出景深,我相信前幾代的處理器就能有這樣的本事,這在影像處理上不是很難的事情,只要能選出主題的邊緣後虛化模糊就能做到,蘋果的處理器不會比安卓差,且這主要靠軟體的影響比較大,當然做出來的效果會很看相片本身質的好壞影響後製偵測的結果,這也是單鏡頭跟雙鏡頭的差別
作者: yellowocean (walk to the sea)   2018-09-15 11:37:00
如果下放,可能多花一點時間成像而已,但是使用體驗可能不會太好,但是蘋果財報也不會太好,大家就沒動力買新機啦
作者: eyecolor (欸)   2018-09-15 11:39:00
我已經說過了.這種程度的演算並不需要用到A12這麼快AIA11的AI處理肯定也不會讓各位發現比較慢..A11對手機而言都效能過剩了..何況A12的AIA12的AI主要是給自駕車去使用的~~
作者: ooxxboy (ooxxboy)   2018-09-15 11:40:00
蘋果新功能舊款能做卻不願下放也不是第一次,就像XR明明就能給雙鏡頭卻不願給你雙鏡頭一樣
作者: ShauEn (What Can I Do)   2018-09-15 11:43:00
不管單或是雙鏡頭,效果看起來都是假
作者: ooxxboy (ooxxboy)   2018-09-15 11:46:00
蘋果在考量產品定位及利潤最大化的情況下,往往會做出這種旗艦價格卻缺東缺西的決定,通常入門價格往往都要再往上買個一級才夠用,就像i6從16G起跳一樣,當年32G早就漸漸成為主流,多少人買了16G後使用苦不堪言?
作者: eyecolor (欸)   2018-09-15 11:48:00
因為很多人協助洗腦說16GB就夠用了 XDDDD
作者: frfreedom (modenwils)   2018-09-15 11:49:00
虛化很早就有,但各家正確率各有差異
作者: eyecolor (欸)   2018-09-15 11:50:00
自己有在用微單..其實這種假淺景深我都看不太下去
作者: ooxxboy (ooxxboy)   2018-09-15 11:51:00
買XR又在意鏡頭的要想清楚,雙鏡頭已經是很普及的規格,
作者: eyecolor (欸)   2018-09-15 11:51:00
....一看就知道是後製的...用過幾次就不用了
作者: eyecolor (欸)   2018-09-15 11:52:00
雙鏡頭的好處是遠距拍照會清晰點.如課堂上的黑板板書數位放大跟光學還是有差別的
作者: ZzoozZ (Mi)   2018-09-15 11:58:00
大大你文件好像沒看完整,裡面sample code:AVCaptureDevice.default(.builtInWideAngleCamera, for: .video, position: .unspecified) 只選WideAngleCamera 下面再設定一下就可以拿到景深的東東了
作者: bcs (= ="frailty..gggg XD)   2018-09-15 12:21:00
XR的景深是可調,p2那個就一般景深,那個景深模式其它卓卓機也可以用,但就是要等他合成。
作者: YongLunLin (YongLunLin)   2018-09-15 12:30:00
勸某人不要這麼嗆!
作者: eyecolor (欸)   2018-09-15 12:33:00
單顆鏡頭google採用的是PDAF相位對焦去取得深度圖再來用立體演算法下去跑出一個淺景深圖像~:~ 被罵這麼嗆先脫離討論了 bye
作者: cowbar5566 (靠爸56)   2018-09-15 13:24:00
實機都還沒出來,就講的頭頭是道的小心被打臉
作者: cute15825 (Westdo0r)   2018-09-15 13:39:00
笑了 一直扯a11不夠用 那845的pixel怎算出來的?
作者: ethan5566 (伊森伍陸)   2018-09-15 13:49:00
笑死 a11是兩大四小核 共六核心 誰跟你雙核心 要比全部加起來的核心就是6核和八核 少在那裡用a11的大核數量去比a12的全部核心數營造那種升級感很大的感覺 另外神經網路也只是從六千億次提升到3兆次 我相信大多數人都不會用到或感受到差別
作者: onollll (onollll )   2018-09-15 14:19:00
A11神經網路確實是雙核心啊 請問eth你是在搞笑嗎?A12神經網路 八核心 速度是A11的9倍麻煩ethan5566 看清楚字好嗎我從頭到尾都是在說神經網路如果不相信 請自行Google 看A11 “神經網路”是幾核心記得順便查一下A12 “神經網路”幾核心兩個差9倍 人像模式怎麼下放到iPhone 8
作者: w60904max (自宅警備隊員)   2018-09-15 14:34:00
舉例pixel 845的就夠算?..goolge 有另外再加AI晶片好嗎不下放的舉例也超矛盾 他技術直接放下就能拔一個鏡頭那他A11 i8+幹嘛不早單鏡頭省錢
作者: eyecolor (欸)   2018-09-15 14:37:00
雙鏡頭主要不是景深運算.而是光學長焦應用.你誤會了吧
作者: onollll (onollll )   2018-09-15 14:38:00
作者: w60904max (自宅警備隊員)   2018-09-15 14:38:00
這篇不是討論單鏡頭的景深嗎?
作者: onollll (onollll )   2018-09-15 14:39:00
我很好心的幫你找 也幫你畫線 自己看iPhone Xr 人像就是靠神經網路 懂了嗎?
作者: eyecolor (欸)   2018-09-15 14:39:00
不必...規格早就知道..多此一舉
作者: onollll (onollll )   2018-09-15 14:40:00
A11神經網路根本沒辦法跑單鏡頭人像 蘋果才沒有下放eye就是有人看不懂啊 所以我丟上來讓他看好看滿
作者: w60904max (自宅警備隊員)   2018-09-15 14:41:00
不過我覺得 i8那時候NN model還沒train好也是原因
作者: onollll (onollll )   2018-09-15 14:42:00
還有 當初iPhone 8Plus“人像光線”出來的時候很多國外網友在問為何iPhone 7Plus沒有支援有網友自己去測試發現 iPhone 7+不是不支援人像光線是因為根本跑不動 所以蘋果才沒有下放給iPhone 7+iPhone Xr能夠單鏡頭拍出人像 iPhone 8卻不行就是差在一個“雙核心”神經網路 與“八核心” 神經網路蘋果也說過iPhone Xr 是靠神經網路下去 才能拍人像這也就說明 不是蘋果不支援 是8根本不行而且8的內存2GB iPhone Xr是3GB 也不夠跑
作者: peatle ( ̄︶ ̄)/\( ̄︶ ̄)   2018-09-15 14:50:00
鐵粉出現XDDDDApple說什麼就信什麼
作者: onollll (onollll )   2018-09-15 15:07:00
樓上一定是沒看完我說什麼不然你說說看 市面上有哪一款手機 內存2GB並且單鏡頭 能拍出人像攝影的
作者: BigQs (BigQs)   2018-09-15 15:27:00
請問內存是什麼?跟外放是一體兩面的東西嗎
作者: fiiox3 (飆速宅男)   2018-09-15 15:58:00
話說速度幾倍,可以單看核心數來看,太神了話說,手機內應該都是放train好的model。這樣只差一代的真的不可能下放嗎?再找找看國外相關文章好了
作者: hidexjapan (hide0504N￾ )   2018-09-15 22:29:00
iPhone X的雙鏡頭景深合成演算法很怪,拍出來先不提油畫感,那景深比較像小DC的景深,有種說不出的詭異
作者: Wampire (韋恩派爾)   2018-09-16 00:58:00
我比較覺得奇怪的是:有必要為了長焦攝影多塞一整組包括感光元件、鏡頭和防手震組件嗎?既佔空間又提高成本、太大才小用了吧! 連景深都能用算的,變焦何不就數位變焦裁切後補差點運算就好?
作者: fiiox3 (飆速宅男)   2018-09-16 10:46:00
數位變焦一直都是補點啊,但那個畫質更屎一樣我還寧願裁切廣角的照片...
作者: ridges (我想妳,無時無刻)   2018-09-17 00:10:00
腦補很強

Links booklink

Contact Us: admin [ a t ] ucptt.com