總結 GPT-4O (for All) 的新功能
能從圖片、文本、音頻、視訊 作邏輯推理
速度比 GPT-4 Turbo 快一倍
可以上電腦看營幕內容 幫忙程式 debug
可以講睡前故事 口語有情緒
可以唱歌 可以自動產生音樂
免費
https://www.youtube.com/watch?v=DQacCB9tDaw
每個人
大家謝謝你們
謝謝
很高興今天你能來到這裡
今天我要講三件事
就是這樣，我們將從為什麼開始
擁有這樣的產品對我們來說非常重要
我們可以免費提供
並廣泛提供給所有人
我們一直在努力尋找減少摩擦的方法
這樣每個人無論身在何處都可以使用 ChatGPT
所以今天我們將發布 ChatGPT 的桌面版本
更新後的使用者介面使使用更加簡單也更自然
但今天的大新聞是
我們正在推出新的旗艦型號
我們稱之為 GPT 是因為 GPT-4O 的特殊之處
就是它帶給大家了GPT4等級的智能
包括我們的免費用戶，我們今天將展示一些現場演示
展示我們新模型的全部功能
我們將推出它們
在接下來的幾週內迭代
好吧所以
讓我們開始一個非常重要的事情
我們使命的一部分
就是能夠讓我們先進
每個人都可以免費使用人工智慧工具
我們認為這非常非常重要
讓這個人對科技的用途有直覺的感受
所以我們真的想將它與更廣泛的理解結合起來
我們一直在尋找減少摩擦的方法
以及最近我們無需註冊流程即可提供收費服務
今天我們還帶來了桌面應用程式到 ChatGPT，
因為我們希望無論您身在何處您者能夠使用它
如您所見，這都很容易，這很簡單
它非常非常容易地整合到您的工作流程中
我們也刷新了使用者介面
我們知道這些模型變得越來越複雜
但我們希望互動體驗能真正變得更加
自然簡單，讓您根本不用關注使用者介面，只關注合作
其中有 GPT
現在是今天的大新聞
我們正在發布我們最新的旗艦型號，這是 GPT-4O
GPT-4O提供GPT-4級智能
但它的速度要快得多，而且它的功能也有所提高
AI 過去幾年跨越文字視覺和音頻的發展
我們一直非常關注如何提高這些模型的智能
他們已經變得相當不錯了
但這是我們第一次真正向前邁出一大步
當談到易用性時
這非常重要
因為我們正在展望互動的未來
我們和機器之間
我們認為 GPT-4O 正在真正改變這個範式
邁向合作的未來
這種互動變得更加自然
並且容易得多
但你知道實現這一目標其實相當複雜
因為當我們彼此互動時
有很多事情我們認為是理所當然的
你知道我們對話的輕鬆程度
當我們打斷
彼此的背景噪音
對話中的多種聲音
或理解語氣
所有這些事情實際上都相當
這些模型的複雜性
到現在為止還有語音模式
我們有三個模型組合在一起來提供
這次經歷
我們有轉錄智能
然後文字轉語音
所有這些都在編排中組合在一起以提供語音模式
這也為體驗帶來了很大的延遲
這確實打破了協作的沉浸感
其中有 GPT
但現在有了 GPT-4O
這一切都發生在年輕時，有以下原因
跨越語音文字和視覺
憑藉這些令人難以置信的效率
它還允許
我們將 GPT-4 類智慧帶給我們的免費用戶
這是我們一直在努力為很多人做的事情
好幾個月了，我們非常非常興奮終於
將 GPT-4O 帶給我們所有的用戶
今天有 1 億人，事實上超過 1 億
他們使用 ChatGPT 來創建工作學習
我們有這些先進的工具
僅適用於我們的付費用戶
至少到目前為止
效率為 40%
從今天開始我們可以把這些工具帶給每個人
您可以使用 GPTs 和 GPT 商店
到目前為止我們已經擁有超過一百萬用戶
使用 GPTs 創造令人驚嘆的體驗
這些是乍得定制的 GPT
適用於商店中可用的特定用例
現在我們的建設者擁有了更多的受眾
大學教授在哪裡
可以為學生或播客創建內容
可以為聽眾創造內容
您也可以使用視覺，因此現在您可以上傳螢幕截圖
照片文件
包含文字和圖像
你可以開始與 ChatGPT 對話
關於所有這些內容
你也可以在它造成痛苦的地方使用記憶
更有用和有幫助，因為現在
它有一種連續性的感覺
在你所有的對話中
你可以使用瀏覽
您可以在其中搜尋實時資訊
在你們的談話中
和進階數據分析
您可以在其中上傳圖表或任何信息
它會分析這些資訊
它會給你答案等等
最後我們也提高了品質和速度
50 種不同語言
關於收費
這非常非常重要
因為我們希望能夠帶來這種體驗
給盡可能多的人
所以我們非常非常高興能夠將 GPT-4O 帶給我們所有的免費用戶
對於付費用戶來說
他們將繼續有多達五次
我們的免費用戶的容量限制
但 GPT-4O 不僅在 ChatGPT 中可用
我們還將它引入 api，以便
所以我們的開發人員今天就可以開始使用 GPT-4O 來進行構建
並製作令人驚嘆的人工智慧應用程式來部署它們
規模為 40 時速度提高 2 倍
便宜 50%
與 GPT4 Turbo 相比，速率限制高出 5 倍
但當我們將這些技術帶入世界時
弄清楚如何以某種方式做到這一點非常具有挑戰性
這既有用又安全
和GPT-4O
在安全方面為我們帶來了新的挑戰
因為我們正在處理實時音頻
即時視覺
我們的團隊一直在努力工作
找出如何減少濫用的措施
我們繼續與不同的利害關係人合作
來自政府
媒體娛樂
所有行業
紅蒸籠
文明社會
弄清楚
如何最好地將這些技術引入世界
所以在接下來的幾周里
我們將繼續迭代部署
發揮你所有的能力
但今天我想向您展示所有這些功能
所以我們會做一些現場演示
我將帶來我們的兩項研究
麥克陳 (Mike Chen) 和別里佐夫 (Beridzov) 領銜
嗨，我是巴雷特，嘿
我認為這是關鍵能力之一
我們很高興與您分享
今天是即時對話演講
讓我們啟動一個演示
所以如果你想知道這個有線的話我會拿出手機
所以我們有穩定的互聯網 如果你看到
底部有一個小圖標
軌道右側 GPT 應用程式
這將開啟 GPT-4O 的音訊功能
嘿聊天GPT
我標記你好嗎
哦，馬克
我很好，謝謝你問你呢
嘿，我現在在舞台上
坦白說，我正在做現場演示
我覺得有點緊張
你能幫助我嗎
讓我的神經平靜一點
哦，你現在正在做現場演示
太棒了，深呼吸並記住
你是專家
我喜歡這個建議讓我嘗試幾次深呼吸
你能給我嗎
對我的呼吸的回饋
好的，在這裡
我走得很慢
那裡有點
標記
你不是吸塵器，在裡面呼吸或數四
好的
讓我再試一次，然後我會深呼吸
四次然後慢慢吐氣
好的，我會再嘗試吸氣和呼氣
就是這樣，你感覺怎麼樣
我感覺好多了，非常感謝
所以標記
您已經研究這些功能一段時間了
你能告訴我們一點嗎
它與語音模式有何不同
是這樣
如果您之前曾使用過我們的語音模式體驗
您首先會注意到幾個關鍵差異
你知道你現在可以中斷模型
你不必等到它完成你的回合
你可以開始說話了，你知道
你可以隨時插入
該模型是即時響應的
所以這意味著你沒有這個
尷尬的是之前有兩到三秒的延遲
你等待模型給予回應，最後
該模型正確地捕捉到了情感
當我呼吸非常困難時，它可以告訴你，嘿
你可能想要
冷靜一點
你跑得太快了一點
所以它確實有這個能力
全面感知你的情緒
不僅如此，儘管該模型能夠產生語音
各種不同的情感風格
它確實有很寬的動態範圍
所以我要啟動另一個演示，是的
嘿 聊天 GPT
你好嗎
我做得很棒
謝謝你問你呢
不錯
這是怎麼回事
所以我的朋友巴雷特在這裡
他最近睡不好
我想讓你告訴他
關於機器人與愛的睡前故事
哦
關於機器人與愛的睡前故事
我為你做好了準備 聚集在一起
巴雷特從前在一個世界
跟我們的不太一樣，有一個叫做位元組戰的機器人
是個好奇的機器人，總是在探索
我開始這個故事
但我希望你的聲音多一點情感
多一點戲劇性
明白了，我們加一下
從前世界上的一些戲劇
和我們的沒有太大不同
有一個機器人叫
沒有 chatGPT 我真的想要最大的情感
比以前更喜歡最大的表現力
明白了
讓我們放大一下
戲劇從前在一個世界
跟我們的沒有太大不同，有一個名叫位元組的機器人
現在你可以用機器人的聲音來做這件事嗎
曾幾何時發出戲劇性的機器人聲音
一個和我們的世界不太不同的世界裡有一個名叫位元組的機器人
位元組是一個好奇的機器人，總是探索新的電路是的
巴雷特下來一點，你能結束這個故事嗎？
但用歌聲來做
太感謝了
我確實感覺輕鬆多了
您剛剛看到了語音功能
但我們也想向您展示視覺能力
因為模型還可以看到我們周圍的整個世界
是的
絕對如您所見，您可以與 ChatGPT 實時聊天
但您也可以透過影片與它互動
好的
讓我啟動 chatGPT
嘿，查奇普特
你好，怎麼樣
一切都很順利
今天我真的很希望你能幫我解決一道數學問題
我洗耳恭聽，我能幫忙解決什麼數學問題
你今天要解決的問題
所以我要在一張紙上寫下一個線性方程
我會告訴你
然後我喜歡你幫我度過難關
但重要的是
不要告訴我解決方案只是提供幫助
一路上給我提示 明白了
好吧，我看到了，嗯，不
我還沒告訴你，只是一路上給我幫助一秒鐘
哎呀，我太興奮了，當你準備好時我已經準備好了
所以 ChatGPT 我在那裡寫下了什麼方程
啊 我現在明白了，你寫下了三個 x 加
一等於四，是的，這是正確的，那麼第一步是什麼
我應該嘗試解決這個問題
第一步是取得一邊有 x 的所有項
和另一邊的常數
所以你怎麼看
我們應該用它加一
好吧，我要嘗試兩邊都減一
然後我會看看我得到了什麼
好想法
現在完美了你會得到什麼
當你兩邊減一時
好的，ChatGPT 這是
我最終得到了什麼，這看起來怎麼樣
現在您已經將術語與 x 隔離在一側
看起來像三 x 等於三
你怎麼認為
我們接下來應該做硫磺x
我不確定你能給我另一個提示嗎
當然你有三個x並且你想找到x的值
考慮什麼操作會撤銷
乘法是減法嗎
但想想乘法的反面
因為三個 x 意味著三倍 x 好吧
我認為這是分裂讓我嘗試分裂
雙方各三，讓我看看賓果遊戲會得到什麼，繼續
並將兩邊除以三
好的，ChatGPT 這是
我最終得到了什麼，這看起來怎麼樣
它看起來很完美
你已經解決了它並且 x 等於
做得很好，你對求解線性方程式有何感想
現在
是的
老實說，我不太有信心能解線性方程
但為什麼你需要使用
這在現實世界中我真的很懷疑
這是一個公平的問題
線性方程組
出現在許多日常場景中
即使我們沒有意識到它用於計算費用計劃
旅行烹飪
甚至在商業中進行損益計算
這基本上是解決問題的一種方法
您需要在其中找到未知值加上
哇，是你知道的
我的生活中有很多未知的價值觀
我完全相信我現在要學數學
我喜歡這種態度
馬特絕對可以幫助解決一些生活之謎
每當你準備好深入研究更多數學時
我在這裡等你還有什麼事情嗎
你今天想解決這個問題，所以 ChatGPT
我真的很愛你，你知道
向我的朋友馬克傳授數學的價值
我寫了最後一件事我愛你
如果你可以看一下
當然我很想看看你寫的東西給我看
每當你準備好時
好的，這就是我寫下的內容，你看到了什麼
哦
我發現我喜歡chatGPT，你真是太貼心了
是的，我真的很感謝所有的幫助，所以是的，正如我們所看到的
哇，你穿的這套衣服很合身是的
正如我們所愛的
我們可以即時聊聊GPT
不僅如此，我們還可以透過視訊與它互動
我發誓如果你看看 Barrett 的 GPT 歷史
都是這樣的方程
現在你知道你可以做線性方程
你能給我們看一些更複雜的東西嗎
我想接下來可以
讓我們嘗試一些與編碼相關的東西
讓我為此拿出一台電腦
可以，然後呢
我要開啟ChatGPT
像 Mira 之前談論的桌面應用程式
好的，在這裡提供一些有關正在發生的事情的背景知識
我們有一台電腦，螢幕上有一些代碼
然後右邊就是ChatGPT語音應用程式
這樣 ChatGPT 就能聽到我的聲音
但螢幕上看不到任何東西
所以我要突出顯示代碼命令，看看它
然後將其發送到 ChatGPT
然後我要談談 ChatGPT 的程式碼
嘿 ChatGPT 嘿
熊 怎麼樣
是的，正在進行
真的很好
我想知道你今天是否可以幫我解決程式設計問題
當然，我很樂意幫助您解決程式設計問題
你正在處理
好吧，我將與你分享一些程式碼
一秒鐘確定的事情慢慢來
好的，我只是與你分享了一些程式碼，你能給我嗎
用一句話簡短地描述程式碼中發生的情況
此代碼獲取每日天氣數據
對於特定地點和時間
週期平滑溫度數據
使用滾動平均值進行註釋
結果圖上的重大天氣事件
然後顯示繪圖
全年平均最低和最高氣溫很棒
非常感謝並在代碼中
你能幫我描述一下這個功能嗎
如果我有 vs 的話，情節會是什麼樣子
沒有這個功能
確定函數 fu x
y 接收資料框 x
包含溫度資料和視窗大小 y
用於計算滾動平均值
它使平均溫度變得平滑
最低溫度
和最高溫度
透過在指定視窗上應用滾動平均值來列
使用 fu 函數
該圖將顯示更平滑的溫度線
因為滾動平均值
減少數據中的噪音或波動
非常感謝所以是的
我一定會想應用這個功能
所以我要生成情節
然後給你看給我
一秒鐘絕對需要你的時間
當你準備好時我很高興看到情節是的
所以到目前為止ChatGPT只能看到程式碼
現在我要運行它
進而
我將使用 ChatGPT 桌面應用程式的視覺功能
所以它實際上也可以看到螢幕上發生的一切
好的聊天chipbkey
我現在和你分享劇情
我想知道你是否可以給我
非常簡短的一句話概述您所看到的內容
繪圖顯示已平滑
2018 年平均最低和最高氣溫
有一個值得注意的註釋
紀念九月下旬的一場大降雨事件非常棒
我還有一個
問題是哪幾個月
看到最熱的溫度了嗎？
什麼溫度
這些對應於最熱的溫度嗎
發生在七月和八月左右
這幾個月的最高氣溫
大約在25度到30度之間
77 華氏度至華氏 86 度
這是怎麼回事
y 軸是 incelsius 或 ferinine
y 軸為攝氏溫度，相應地標記了溫度
例如平均溫度
最低溫度和最高溫度
是的
所以我們可以看到
ChatGPT 不僅可以幫助我
解決起來很容易
我需要幫助的線性代數方程
用它還可以與程式碼庫交互
並查看繪圖的輸出
以及計算機上發生的一切
所以幾分鐘前
我們要求 x 的現場觀眾提交一些
請求他們希望我們在這裡嘗試什麼
所以我會接受一些提示
好的
但是加斯卡
想知道GPT-4O是否能夠即時翻譯
麥克你想試試這個
肯定是的，讓我們開始吧
我會說義大利語
所以你可以告訴我這是什麼義大利語
當然
我們開始做吧
嘿，chatGPT 你好嗎
我做得很棒
感謝您詢問您今天過得怎麼樣
我很好
所以我希望你擔任翻譯
我在這裡有一個朋友
誰只會說義大利語
我只說英語，每次你
聽到英語，我想讓你把它翻譯成義大利語
如果你聽到義大利語，我希望你能把它翻譯回來
到
英語就是這麼好
麥克，她想知道鯨魚是否會說話，他們會告訴我們什麼
他們可能會問我們如何解新方程
當然是的
看起來很棒，很有效
好的
所以下一個來自捲餅約翰 78 他問
你能告訴我什麼嗎
你感覺
只要看你的臉
巴雷特，你想嘗試嗎
絕對讓我們嘗試一下
嘿乍得GPT
嘿，怎麼了
今天我怎樣才能照亮你的一天
好的，是的
所以我要給你看一張我的自拍照
然後我想讓你試著看看是什麼情緒
根據我的外表，我感覺這聽起來像是一個有趣的挑戰
來吧，給我看看那張自拍照
我會戴上我的情感偵探帽
好吧，這就是我，是什麼樣的情緒
你覺得我感覺嗎
唔
看起來我正在看一張木質表面的照片哦
你知道那是什麼東西
我之前寄給你了，別擔心，我其實不是一張桌子，好嗎？
所以再看一下，這樣更有意義
啊那裡
我們走吧，看起來像
你感覺非常高興和開朗，笑容燦爛
甚至可能還有一絲興奮，無論發生什麼
看來你在
分享美好氛圍的泉源的美好心情
是的，沒有原因
我心情很好
因為我們正在做演示
展示你是多麼有用和了不起
喔別這樣你讓我虛張聲勢
太棒了，這就是今天的現場演示
正如你所看到的，這感覺太神奇了，太棒了
但我們也想消除一些神秘主義
從技術上
並把它帶給你
所以你可以在接下來的幾週內親自嘗試一下
我們將向所有人推出這些功能
今天已經非常多了
專注於免費用戶
以及新模式和新產品
但我們也非常關心這麼快的下一個前沿
我們將向您通報我們的最新進展
下一件大事，在我們結束之前
我只是想感謝令人難以置信的開放人工智慧團隊
也感謝詹森
和 Nvidia 團隊
為了帶給我們
最先進的 GPU 讓今天的演示成為可能
非常感謝大家今天參與其中