[問題] 為什麼GPT對動漫遊戲的問題錯誤率極高?

作者: d012375913 (阿利)   2024-11-15 19:32:08
餓死抬頭
最近懶得動腦的時候都用GPT代替搜尋
一般民生問題還好 答案可以參考
但每次問到動漫遊戲領域
尤其是遊戲 幾乎謊話連篇瘋狂瞎說
錯誤率高到幾乎無法參考
為什麼生成式Ai在遊戲動漫領域這麼弱
作者: AoyamaNanami (七海)   2024-11-15 19:33:00
AI不需要機油
作者: ssarc (ftb)   2024-11-15 19:33:00
對一般外行人來說很有參考性啊
作者: s203abc (SamFu)   2024-11-15 19:33:00
看不夠多動漫叫Ai去看動漫就搞定了
作者: kirimaru73 (霧丸)   2024-11-15 19:35:00
簡單一點說他大部分吃過的東西還是網路上爬下來的ACG比例就真的沒那麼高另外他在研發過程有被要求不要動不動就說窩不知道所以他會傾向硬掰而不願意說窩不知道
作者: aaaaooo (路過鄉民)   2024-11-15 19:35:00
基數小沒什麼人幫訓練阿
作者: sokayha (sokayha)   2024-11-15 19:36:00
類似概念的東西太多 所以在算比重的時候全都是類似的分數所以全混在一起吧 也不是只動漫 估計電影也一樣吧 V的團體它也都混一起 猜演藝界也會一樣
作者: BOARAY (RAY)   2024-11-15 19:37:00
一直喂他他就變更好了啊
作者: a2156700 (斯坦福橋)   2024-11-15 19:37:00
作者: jcaosola (紙袋)   2024-11-15 19:38:00
版權問題,training data 只有心得文
作者: d012375913 (阿利)   2024-11-15 19:40:00
很攏統的問題他還可以 問細一點就直接爆
作者: a05150707 (Tw)   2024-11-15 19:40:00
因為他叫生成式AI 不是百科全書
作者: gaym19 (best689tw)   2024-11-15 19:42:00
因為他是AI 不是百科全書沒人餵資料的話他當然瞎扯啊
作者: midas82539 (喵)   2024-11-15 19:42:00
這種Google就能解決的東西,靠會鬼扯隨機生成的gpt?你要準確度100%的東西,問AI本來就有問題
作者: vsepr55 (vsepr55)   2024-11-15 19:43:00
你以為不是動漫gpt就不是胡說八道喔==
作者: sokayha (sokayha)   2024-11-15 19:43:00
年輕世代好像有誤解AI功能的趨勢 不太願意google而是都在gpt
作者: kirimaru73 (霧丸)   2024-11-15 19:44:00
現在先進的版本有把 [網路搜尋] [閱讀搜尋內容] 作為和[講出下一個字]類似的動作來訓練就是他做了一個搜尋且偷看的動作,但你以為他只是瞬間沒講話,所以確實有機會答對他完全沒看過的資料當然就跟鄉民自己去搜尋一樣,還是很容易搞錯早期的版本沒這功能,所以會容易跳針說自己不知202X年Y月以後的事情
作者: midas82539 (喵)   2024-11-15 19:45:00
文字接龍隨機生成的問題還是存在阿,比如說你問個智力
作者: kirimaru73 (霧丸)   2024-11-15 19:45:00
其實第一個動作先問GPT再Google確實是有效率的策略只是這樣做的人98.7%對GPT的本質有誤解
作者: midas82539 (喵)   2024-11-15 19:46:00
測驗的,問他:設計一個勝率*賠率恆等1的公式它100%會隨機生成一個乍看合理但期望值驗算就是錯的答案,因為它本身就不是純邏輯推演的
作者: kirimaru73 (霧丸)   2024-11-15 19:48:00
GPT的超級大弱點 怎麼戳怎麼爆炸https://i.imgur.com/GNALWO1.jpeg
作者: sokayha (sokayha)   2024-11-15 19:49:00
就靠資料堆疊出來的 不知道是先會進化到最後這些也都能正常處理 還是會先撞到這種生成方式的極限
作者: kirimaru73 (霧丸)   2024-11-15 19:49:00
他做的事情從頭到尾都只有一個 就是 「回你的話」其他「功能」都只是想像出來的
作者: willytp97121 (rainwalker)   2024-11-15 19:49:00
因為google要先花時間篩一堆無用資料 越科學的領域問GPT越不會出錯
作者: midas82539 (喵)   2024-11-15 19:50:00
笑死,連數數都不會,可憐
作者: sokayha (sokayha)   2024-11-15 19:50:00
叫它列15個英文字母的單字也是炸w
作者: meatybobby (Bobby)   2024-11-15 19:52:00
沒讓他上網搜尋吧 有搜尋的準確度蠻高的
作者: willytp97121 (rainwalker)   2024-11-15 19:52:00
現在用google查遊戲攻略應該就深有體會 洗流量的內容農場網站一大堆
作者: k960608 (霧羽‧浪沙)   2024-11-15 19:52:00
一堆農場文在騙 是要怎麼正確
作者: kirimaru73 (霧丸)   2024-11-15 19:53:00
GPT有沒有針對「正確回答專業問題」這點去訓練?有,因為人類有介入去強化這點但是人類的力量在海量的資料面前不值一提所以只是「稍微有點努力往這方面走」而已
作者: sokayha (sokayha)   2024-11-15 19:53:00
農場文也不會編假的holo三期生成員啊 但是gpt就是會回答出不存在的名字
作者: ringtweety (tark)   2024-11-15 19:54:00
他也不是亂找 亂找隨便去google或wiki都不會找到錯的
作者: qd6590 (說好吃)   2024-11-15 19:55:00
你在西洽問有時候也會得到一堆莫名其妙的答案阿 對阿
作者: sokayha (sokayha)   2024-11-15 19:55:00
啊 我看到gpt顯示去查網頁了w
作者: kirimaru73 (霧丸)   2024-11-15 19:55:00
作者: d012375913 (阿利)   2024-11-15 19:55:00
問遊戲開始瞎掰了https://i.imgur.com/G55h5FD.jpeg
作者: kirimaru73 (霧丸)   2024-11-15 19:56:00
他有時候會這樣 講完才覺得和自己找到的資料好像不太一樣 所以就打個**表示怪怪的
作者: a1379 (超☆魯肥宅)   2024-11-15 19:57:00
因為是“生成式”AI 他只負責拉東西給你吃至於拉的是屎還是咖哩你要自己分辨
作者: PunkGrass (龐克草)   2024-11-15 20:02:00
因為這個領域對整個人類的進步來說根本不重要 所ai就敷衍學習吧
作者: kirimaru73 (霧丸)   2024-11-15 20:02:00
這個被講起來根本只是在拉屎的東西已經很偉大了人類之試過的其他方式根本拉不出這種整坨成型的東西而且認真觀察屎的形狀還是有機會提升工作效率
作者: kirimaru73 (霧丸)   2024-11-15 20:05:00
問問題時要求是一門技術 也有人在研究這個有些要求你不先講他還不肯開金口https://i.imgur.com/eZ8ZXW3.pnghttps://i.imgur.com/vXQR937.png因為沒有說對方是專業的研究者,所以他死都不說
作者: roger840410 (roger)   2024-11-15 20:15:00
作者: XFarter (劈哩啪啦碰碰碰)   2024-11-15 20:15:00
總之基本的 CoT 的 Custom instructions 要下好以及一些增強的 prompts 有下的話,以 4o 來說應該許多問題的答案都算準確,但是前提是問問題的單字、分段以及標記(e.g: LaTeX, Markdown) 對於得到正常答案也蠻重要的
作者: choosin (秋心)   2024-11-15 20:17:00
沒什麼問題是還好 只是你ACGN比較熟
作者: XFarter (劈哩啪啦碰碰碰)   2024-11-15 20:17:00
加上 GPT4o 當前版本如果發現問題猜不太出來,它是有可能直接去搜尋引擎找的http://i.imgur.com/53jTJE3.jpg
作者: clothi58707 (唉)   2024-11-15 20:28:00
最後那個喵是樓上的性癖嗎
作者: zChika (滋琪卡)   2024-11-15 20:30:00
我猜第一句是先餵GPT說你是一隻貓
作者: ianpttptt (你小海岸)   2024-11-15 20:34:00
gpt對火影特別擅長 海賊他都不一定懂了 可以試試編火影故事
作者: kaimai (折翼天使)   2024-11-15 21:28:00
AI不看卡通
作者: nggfn (nggfn)   2024-11-15 21:35:00
叫GPT列柯南劇場版還會錯,叫他去參考WIKI也還是錯
作者: kaltu (ka)   2024-11-15 21:44:00
所有東西錯誤率都極高,只是你懂動漫類所以馬上知道它在唬爛而已
作者: KaguraCat (神樂喵)   2024-11-15 22:02:00
他瞎掰的可多了
作者: jhkujhku (梧桐)   2024-11-15 22:14:00
不要說遊戲 問歷史問題也是幾乎全錯
作者: laechan (揮淚斬馬雲)   2024-11-15 22:21:00
因為被c洽板的白痴廢文干擾,例如:貝爾克朗尼守得住街亭嗎
作者: sokayha (sokayha)   2024-11-15 22:24:00
這樣應該很多揮淚斬馬超https://i.imgur.com/VuKLilq.png
作者: linzero (【林】)   2024-11-15 22:28:00
圈子大小資料多寡吧
作者: XFarter (劈哩啪啦碰碰碰)   2024-11-15 22:45:00
其實我只是要求它每一句話都得喵喵叫而已

Links booklink

Contact Us: admin [ a t ] ucptt.com