※ [本文轉錄自 iOS 看板 #1aVay9sB ]
作者: KimomiKai (時雨大天使) 看板: iOS
標題: [心得] WWDC23 發開者大會節錄-空間計算時代
時間: Tue Jun 6 05:09:27 2023
時長約2小時5分,就一步一步整理今年的發表會,技術跟應用猜想會寫在段落中,心得寫
結尾。
這次使用Youtube(比較快可以重播)截圖,並且使用英文字幕CC1翻譯繁體中文,重要段
落加入時間軸定位,有需要的版友可以直接跳空降去看。
===
發表會Keynote連結:https://www.apple.com/tw/apple-events/
WWDC22節錄:https://www.ptt.cc/bbs/MAC/M.1654716660.A.B26.html
https://i.imgur.com/mOchfLh.jpg
===
4:20 Tim Cook開場,這次在Apple Park的一個彩虹造景內開場。
像常年一樣對大家說明開發者大會的宗旨就是技術的成長,以及發展軟體,硬體的交互配
合創造非常良好的體驗。
https://i.imgur.com/E8MmPkz.jpg
===
6:00
1.MacBook Air 15.3”
開場John先講述Mac家庭換上Apple Silicon後的成長性,節能跟性能中取得平衡。
MacBook 系列成為『World’s best-selling laptop』(如果以單一品牌來說,系列筆記
本確實是世界銷售第一)
整體尺寸:15.3”,全鋁合金,整機僅11.5mm,1.51kg(3.3磅),具2個Thunderbolt 4
接口,1個MagSafe 磁吸充電接口,1個3.5mm耳機輸出口,有4種配色分別為星光色,午夜
色,太空灰色,銀色。
顯示螢幕為Liquid Retina 顯示器15.3”,解析度為2880x1864,標配10bit P3廣色域,
原彩顯示,亮度為500nit,三邊框均為5mm寬。
webcam為1080P的攝像頭,一組3麥克風陣列,6揚聲器含高低音單元在鍵盤上半以及螢幕
轉軸下方。
依舊搭載M2 SoC,無風扇被動式散熱,基本款標配8 GB UMA以及256 GB ROM。
台灣售價42,900起。此外M2 13” MBA進行降價,台灣售價35,900起,M1 13” MBA 依舊
為30,900維持不變。
https://i.imgur.com/JOBMQnb.jpg
11:39
2.Mac Studio
更新為M2 Max以及M2 Ultra SoC,其中M2 Ultra為新推出的SoC,滿血版本有24 Cores CP
U,76 Cores GPU,32 Cores NPU,基礎64 GB UMA(可客製最高192 GB UMA),基礎1 TB
ROM最高8 TB ROM。
統一記憶體帶寬速度可達800GB/s,並且有GPU Cores可以處理22條8K ProRes影片素材剪
輯。
硬體中的HDMI也升級為2.1版本,搭配TB4最高可以連接6台6K Pro Display XDR顯示器。
https://i.imgur.com/rqLvbah.jpg
Mac Studio 技術頁面:https://www.apple.com/tw/mac-studio/specs/
M2 Ultra Mac Studio 台灣售價129,999起。
https://i.imgur.com/5gqnDT1.jpg
16:00
3.Mac Pro
沿用上一代的機殼模具,標配M2 Ultra,之前intel時代的Afterburner擴充卡功能都被標
配在M系列晶片內了,自然不需要額外採購這張超貴的擴充卡。
並且自帶8個Thunderbolt4 接口,2個HDMI 2.1,6個 PCI-e 4.0的插槽擴充。
(如果對於擴充硬碟容量有需求的可以買PCI-e轉M.2插槽直接插滿Gen.4 SSD,現在SSD價
格都在降價,沒什麼太大剛需需要點選官網的客製選項,但也只有Mac Pro可以這樣做,
其他機型還是照規矩官網客製)
Mac Pro 技術頁面:https://www.apple.com/tw/mac-pro/specs/
M2 Ultra Mac Pro 台灣售價229,900起
https://i.imgur.com/pFBnh5I.jpg
至此,Apple已經完成Mac所有產品線的M系列晶片鋪設,徹底脫離X86架構,未來可能會漸
漸透過macOS的更新把X86的model都淘汰掉,到時候連黑蘋果都沒辦法用,這點要注意手
上的電腦要先做好轉換準備。
Mac系列使用了近20分鐘介紹,後面轉交Craig介紹iOS 17。
20:10
4.iOS 17
先從訊息傳遞的三大App開始說起。
Phone.app可以在來電的時候顯示來電者的名片海報並且呈現在螢幕上,並且適用於CallK
it提供給第三方軟體開發使用,未來第三方通訊軟體都可以透過CallKit呈現來電的頁面
自訂。
Live Voicemail 實時語音郵件,可以透過電話撥入的時候,對方的留言可以轉換成文字
給使用者判斷是否有接起通話的必要性,可以用於朋友或者家人的來電。
FaceTime.app 可以錄製一段消息給對方,讓對方稍後觀看訊息。
Messages.app 更新了訊息文字的搜索功能,使其更加能過濾且精準。並新增一個快速檢
視上回重點訊息的功能可以隨時點選查看當時的重點訊息。
將訊息左滑可以回覆任何訊息功能,以及語音訊息可以立刻轉換成文字可供查看後再點選
是否要聆聽此段語音訊息。
共享位置,可以向對方分享你目前所在的位置。
Check In功能可以先行跟對方預定你的定位,假設已到目的地後將會自動發送訊息通知對
方,假設尚未到達目的地且沒有回覆對方,將會發送警示訊息給對方聯繫,比如是當前位
置和經過路線,以及電池電量和狀態可以讓對方判斷是否可以接電話聯繫。
共享的資訊將透過終端對終端的加密方式保護隱私。
將iMessage的鍵盤功能整合進一個+符號內,點選後可以展開功能選取。
並且加強Stickers 貼圖功能,可以選取照片或Live Photo後透過NPU摳圖的方式直接生成
貼圖或者動圖貼在聊天室中的任一個訊息上,可以自己調整大小,傾斜角度等,也可以透
過加入特效的方式對一些靜態貼圖增加互動特效,在手機擺動角度的同時也會有所互動。
AirDrop共享的方式在手機通訊錄上得到新的功能為NameDrop,只需要雙方的手機或者手
錶放在一起感應即可使用NameDrop交換雙方的通訊名片海報聯絡方式,也可以在其頁面選
擇是要分享名片中的電話號碼或者是email郵件地址。
假設在AirDrop的過程中離開了傳輸範圍,檔案會先發送到雲端伺服器中,透過網路進行
下載。
SharePlay API 則可以讓第三方軟體可以使用共享的功能進行同步觀看,同步遊玩相同的
進度。
Keyboard輸入法智能修正,其自動修正的功能是透過終端設備上的NPU機器學習實現的,
輸入法在透過Transformer 語言模型的單詞預測去做自動修正,比以往任何時候都更加準
確,不僅僅針對單字單詞,更是整個句子的文法語意判斷,假設字詞修正後並不是你想表
達的也可以透過點擊畫線字詞後顯示最初輸入的字詞進行回復。(髒話也會讓輸入法進行
學習...)預測字詞後僅需要開頭輸入後進行空格自動填入將可以提昇句子的完成速度,
此預測字詞功能也應用在聽寫功能之中。
照片精彩回顧的基礎讓Apple推出了『Journal.app』這個寫日記APP,將在下半年推出。
會根據照片,位置,音樂,運動鍛鍊等等提供智能的建議,並且提供Suggestions API讓
第三方軟體可以使用。這個建議將是個人的隱私,也會被終端加密保存,即便是Apple也
不得訪問。
StandBy 待機功能,僅適用於iPhone 14 Pro 系列,借助AOD功能可以讓橫置的iPhone顯
示個性化時間,可以客製顯示時間的背景。
Siri的呼叫不再透過以往的『Hey Siri』,而是可以省略直接呼叫『Siri』,並且重複下
指令無需再喊Siri的名字即可連續發出指令。
Maps現在提供離線下載功能可以使用。
相簿不只可以智能識別人物,現在連貓貓狗狗都可以識別。
https://i.imgur.com/PUiMeLX.jpg
37:25
5.iPadOS 17
除了先前公布上架iPad版本的Final Cut Pro以及Logic Pro都拓展了iPad的工作可能性,
現在在iPadOS裡的小組件可以直接在小組件外部進行互動點選,不必點選後跳轉到APP內
作業。
在鎖定畫面加入先前iOS上的客製化鎖定畫面,並且可以在鎖定畫面的左側加入小組件查
看快速操作。
Live Activities 實時活動,現在可以查看追蹤訂單的進度,計時器時間。
Health.app 透過手上其他設備可以搜集彙整成一個大螢幕的詳細報告,並且透過HealthK
it創新健康和健身體驗。
PDF.app 瀏覽編輯PDF可以做更多簡單的編輯,自動填入標單內的資訊或者快速導入簽名
簽署文件發送,並且連動Notes可以批註並且實時共享作業同一份PDF文件。
台前調度在外接顯示器上得到空間上的優化編排,得到更好用的工作空間,並且透過外接
顯示器的攝像頭進行FaceTime通話和視訊會議。
https://i.imgur.com/IA6VKJ8.jpg
46:05
6.macOS Sonoma
命名團隊這次找最棒的葡萄園去葡萄酒產區。
先前提到的iOS以及IPadOS新增功能都同步新增到macOS上。
螢幕保護程式有先的資源和客製個性化頁面。
小組件不在躲在側邊欄了,可以拖拽至桌面中放置,當開啟應用app時將會降低凸顯程度
,淡化顯示效果在背景運作,此外在iPhone或者iPad上安裝的小組件,只要在同一網段上
,都可以同步過去Mac上不需額外安裝。
在遊戲方面,Metal 3 自從加入了MetalFX Upscaling超採樣功能後,對於一些大型遊戲
來說都能獲得性能上的提升。這次加入了Game mode模式為玩家提供更佳的遊戲體驗,確
保CPU和GPU在遊戲程序中的優先級為最高優先級,保持後台任務的使用佔有率,幀生成速
率優化更一致,使用藍牙雙採樣降低藍芽設備(手把輸入延遲)和AirPods的延遲(音頻
輸出延遲)。
Metal 3也提供了新的遊戲移植工具包Game Porting Toolkit ,使開發者輕鬆移植他們的
遊戲到macOS下,並可以透過Quicker evaluation快速的在各個型號的Mac上查看運行狀況
,並且簡化了遊戲著色器以及圖形代碼轉換率。小島秀夫因此也移植了『死亡擱淺 導演
剪輯版』進入macOS(可以開始送貨打BT了)
Video conferencing 在對第三方視訊會議軟體可以達到非常驚艷的效果,在分享螢幕畫
面的同時可以將視訊鏡頭透過NPU的作用完美融入進去共享螢幕內進行簡報會議,並且可
以對自己的視訊鏡頭添加各種特效,此些功能已在FaceTime,Zoom,Teams,Webex中使用
。
Safari 中的WebKit提供了百萬種的技術,隱私技術可以在瀏覽網站時加密,且阻擋追蹤
功能,另外Passkeys可以透過iCloud Keychain 共享方式到群組內,並且都有權限可修改
密鑰。
Safari還新增了使用者Profiles區別工作和個人瀏覽的混合場景,將可以分離cookie,歷
史紀錄,拓展功能,選項卡組,收藏夾。
另外也新增了Web apps 功能可以將網頁釘選成應用程式app的方式快速啟用訪問,可以應
用系統層使用Spotlight以及通知和其他方式作業。
https://i.imgur.com/XepQIuB.jpg
59:30
7.Audio & Home
Adaptive Audio 自適應音頻,將兩個聆聽方式的優點二合一,對於不同的應用環境動態
調整混合透明度以及主動降噪,即便你在講電話的途中遇到儀隊吹奏樂,你也可以保持良
好的通話品質。
此外還提高了AirPods在設備間切換的流暢性與延遲。
AirPlay in hotels 借助酒店飯店的設備支持,可以簡單透過二維碼的配對進行AirPlay
連接房間內的WiFi以及顯示電視。
Apple Music & CarPlay 在車上啟用SharePlay可以加入駕駛者連接的CarPlay 會話,可
以一同播放喜愛的音樂。
1:04:40
8.tvOS 17
在Apple TV的主頁面右上角將加入控制中心,輕觸遙控器即可,若是遙控器找不到,可以
透過Find My去定位尋找遙控器。
現在相簿裡的『回憶』可以作為TV的螢幕保護程式,透過流暢的動畫過度效果來完美構圖
。
FaceTime 也加入了Apple TV中,現在可以坐在沙發上,啟用iPhone或者iPad的相機鏡頭
以及麥克風加入通話,並且支援SharePlay同步觀看影片。
Continuity Camera API 可以讓家中的電視螢幕更具互聯性以及娛樂性,而視訊會議軟體
Zoom,Webex,將在年底前上架tvOS。
https://i.imgur.com/c4KRzZp.jpg
1:07:40
9.watch OS 10
(前導影片的音量和風格都不適合半夜,我看的時候特別調小音量...)
撥動數碼錶冠可以查看訊息,任務行程,睡眠小組件,並且同IPadOS中的小組件可以堆疊
並且直接互動查看。
新錶盤有兩個,一個是調色盤,會根據時間變化顏色,另一個是史努比動畫錶盤,對當地
天氣也有不同的呈現效果。
Cycling 自行車騎乘,現在可以連接單車用藍芽傳感器功率計等等,並且透過自有的心率
計結合計算FTP速率以及規劃騎乘期間的動力區間,都將在計算終端iPhone上完成,並且
同步iPhone上的詳細數據檢視報告。
Hiking 健行,在指南針終將新生成兩個檢查點,一個是通信訊息檢查點,如果需要給家
人通報,會在電信營運商那裡接收最後的信號位置,另一個是緊急通信檢查點,假設有意
外發生,可以透過電信營運商撥打緊急電話求助,並指示路線上的位置。
此外指南針還結合高度計數據綜合一個3D維度的座標系統予以通報。
透過Workout APIs,在S8和Ultra兩個搭載新運動傳感器上的設備,可以計算像是高爾夫
球揮竿以及網球揮拍的發球動作數據制定一套有效的鍛鍊。
Health.app 在心理健康方面以記錄日常情緒描述自己當前的心境,瞭解更多的心理狀態
有助於認識自己,對於抑鬱,焦慮的治療可以有一套對自己的依據可供醫療團隊輔助診斷
。
Vision health 視力健康,對於減少近視是透過增加白天在外的戶外運動,透過設備的環
境光傳感器測量在白天戶外渡過的時間,另外是監測兒童對於設備(書籍)的視覺距離,
透過iPhone和iPad上的FaceID(TrueDepth相機鏡頭),在距離設備太近的情況下會彈跳
出警示頁面提示將保持合適的視距以繼續觀看內容。
一樣健康資訊將保有加密隱私功能。
https://i.imgur.com/JsOzmpE.jpg
===
以上Developer Beta測試版都將在發表會之後提供開發人員測試,Public Beta 將在七月
提供給公開測試者使用,正式版本將在今年秋天全面推送。
===
1:20:50 One more thing…(戰略性產品發表)
10.Apple Vision Pro (Cook說這是AR產品,擴增實境產品)
是一種新的計算機終端,將現實世界和數碼世界無縫合併。其操作方式只有簡單的眼睛,
手,和聲音進行控制互動,不用拿左右手控制手把控制。
現實生活中的空間將可以擺放app應用軟體,其大小不受拘束,以全新的方式進行拍照錄
影,並且重溫珍貴的回憶,可視的最大尺寸螢幕以及環繞立體聲觀看電影,電視節目,體
育節目。
Mac開創了個人計算領域,iPhone開創了移動計算領域,Apple Vision Pro的目標就是對
下一個時代開創一個空間計算領域,強大的技術帶來新的維度發展。
其擴充實境的三維空間都對環境光有所反應,投下的陰影效果會對大小,距離也有所反應
,應用視窗的大小可以自由的填充現實周圍空間,並且以你為中心對多個開啟的應用app
分配空間顯示。
對於應用程式app的顯示遠近可以透過數碼錶冠調整。
就像滑鼠觸控板之於Mac的操作,點擊式滾輪之於iPod,多點觸控之於iPhone,在空間計
算上高度直觀的輸入方式並消除控制手把對於額外硬體的需求,單用眼睛,手指,聲音即
可完成操作。對你的眼球移動,對於你的手指手勢有所反應,在搜索欄應用語音轉文字方
式輸入。
EyeSight 是將你的眼睛展示給外部的人看,因為眼睛是表達情緒聯繫情感的重要指標,
當附近有人時,Apple Vision Pro會在顯示螢幕上顯示你的眼睛。當使用者在瀏覽應用ap
p時,Apple Vision Pro外部顯示螢幕會將你的眼睛帶有藍光互動效果,當完全深度沈浸
應用app時會顯示出藍色帶有彩色的光線訊號告知外部的人,使用者目前看不到外部環境
,假如有人進入近距離視線時,Apple Vision Pro將會融合對外攝影鏡頭顯示出外部的人
在內部顯示螢幕上。
而Apple Vision Pro內最基礎的app則有TV,Music,正念,設定,無邊記,Safari,照片
,Notes,App Store,郵件,訊息,Keynote,FaceTime等,也始終同步iPhone,iPad,M
ac都由iCloud同步。
然在應用app內處理的內容不僅僅可以是二維的維度,更可以單獨獨立出來成為3D的三維
內容互動。
可以透過藍芽連接妙控鍵盤,觸控板等進行文字編輯,如果是透過Mac則可以將Mac顯示的
內容顯示在Apple Vision Pro上,成為大且私密的便攜式4K顯示器。此外Mac的內容可以
搭配Apple Vision Pro原生應用app一起在螢幕上作業。
在觀看全景照片時,可以顯示出環繞環景照片,顯示出沈浸效果,並且Apple Vision Pro
帶有3D Camera可以錄製3D空間音頻的影音回憶讓你一次又一次的體驗。
在影音方面,Apple Vision Pro具有壓倒性深度的3D電影播放體驗,戴上AirPods Pro後
可以體驗沈浸降噪的電影級別環繞空間音效體驗。假設片源音源支援即可像Demo呈現的3D
恐龍一樣栩栩如生的移動。透過Apple Arcade遊戲裡,NBA 2K23透過螢幕,揚聲器,手把
控制創造出不同於平面電視上的遊玩體驗。
1:39:40(這邊建議自己看一下老鼠CEO怎麼講和畫面)
迪士尼來講述合作的應用情況,對...那隻老鼠帶著一群可怕的傢伙來了,那個體育的轉
播畫面真的讓我很震撼,感覺要考慮訂閱迪士尼+了。
Apple Vision Pro具有Mac高算力的特性,iPhone的移動性,Watch的穿戴性,融合集大成
品。
為保持最先進的算力和最輕的穿戴性,所使用材料都是輕量級的。產品前端部分採用3D成
型的單片玻璃,並且拋光表面且可讓攝像頭,傳感器透過玻璃捕捉外界資訊,配有像是Wa
tch的凸起按鍵還有數碼表慣用以簡易的控制畫面,整體的外殼採用鋁合金CNC一體式加工
,高算力晶片搭配被動式散熱在底部留有自然進氣口通風散熱,而後面的綁帶則採用豪華
柔軟的編織材質實現舒適性和耐磨性,並且可以透過旋鈕調整鬆緊,卡扣式設計將主體與
綁帶,揚聲器部件串接。
與蔡司鏡片合作訂製磁力吸附的近視度數鏡片吸附在內側,不通用原先的眼鏡。
外置的高性能電池續航僅有2hr,透過一條電源線連接,目的是為的減輕頭部的重量。
Apple Vision Pro 所使用的是Micro-OLED做出兩個小面板均為2300萬像素,有著4K解析
度,HDR顯示能力,廣色域顯示,極高的ppi造就非常驚艷的顯示效果。
Apple Vision Pro 所使用的是空間音頻揚聲器,以左右各兩組高低單元組成的揚聲器達
成空間音頻效果。
Apple Vision Pro 前面的攝像頭傳感器高達17個以上6個麥克風輸入,有的用以錄製3D影
音,有的是追蹤頭部,手部跟蹤,實時3D映射,內部的傳感器高達22個以上,用以追蹤眼
球的高速攝影鏡頭,IR cameras等可見光外波段的傳感器。
Apple Vision Pro 所使用的雙晶片為M2以及R1,其中R1主要是降低傳感器以及顯示的延
遲,最低可以降至12ms內將新圖像發送至顯示器。
在FaceTime中,首先可以透過前置傳感器和攝像頭創造一個自己的『Persona』進行通話
。
Apple Vision Pro 所使用系統為visionOS,基於macOS和iOS,iPadOS數年工程之上創新
的結果。
在隱私方面則使用了Optic ID,虹膜辨識系統作為個人的保護密碼,其生物特徵每個人都
不同,因此可作為最佳的保護密碼使用。
最後
Apple Vision Pro 定價為3499美金,將在2024年初在美國率先開賣,其餘地區則是2024
年晚些販售。
https://i.imgur.com/4q7jW7V.jpg
===
至此發表會結束。
晚點補眠後再來補上對這次的一些看法以及心得。
來睏@@