Re: [閒聊] 作了AI圖靈測試 結果公布與分析

作者: clothg34569 (提拉米蘇冰淇淋)   2024-11-19 22:18:03
※ 引述《clothg34569 (提拉)》之銘言:
: 先上連結 歡迎隨便轉載
: 20題版本 : https://forms.gle/2iTfiaCcwSSXWs6j8
: 30題版本 : https://forms.gle/hzXRtphBZSoDcQcG9
: 50題版本 : https://forms.gle/cp1EprygC6mKWrzq7
: 完整版: https://forms.gle/AYR2JiyJuxviebTp7
: AI圖片靈魂分辨測試 簡稱AI圖靈測試
: 來看看分不分的出是AI圖吧
: 完整版總共100題 因為長到我自己都受不了
: 所以有簡化的20 30 50題版本
: 其中20 30 50的題目都沒有重複
: 就之前AI群組裡聊天時聊到說AI玩久的到底好不好分AI
: 所以自己來做一個表單玩玩看
: 目前成績: 幹爛各大AI群 真的有夠難==
: 連我自己都沒滿分==
: https://i.imgur.com/fpmrDgU.png
: 感想大概這樣
: 我覺得有幾張真的超過份....
: 目前看了一下後台最高是92分 也是出題者以外唯一一個有90的
題目如上 還沒玩的可以先玩看看再看結果分析
以下是這次題目結果的分析
https://i.imgur.com/yEifhRy.png
先上懶人重點
20題最多人做(1500)
結果呈現一個超級漂亮的鐘形曲線
扣掉100和0之後(大部分都是我測試時填的)
平均51 中位數50 標準差14.7
#丟硬幣機率參考 : 平均50 中位數50 標準差5
大概就是標準差大一點的丟硬幣(?
裡面大概有750個人輸給丟硬幣的平均分數
....其實要我說的話找1500人丟硬幣好像也會得到差不多的結果 :)
另外
65分就贏過68%的人
80分就贏過95%的人
作者: x2159679 ((● ω ●))   2024-11-19 22:21:00
我覺得這次測試難易度很高就是了,也是有那種很簡單就看得出不是AI圖的這次選圖很多那種本來就被學很多的繪師
作者: guogu   2024-11-19 22:22:00
懂了 下次做題準備硬幣
作者: smart0eddie (smart0eddie)   2024-11-19 22:26:00
作者: andy0481 (想吃比叡的咖哩)   2024-11-19 22:27:00
我覺得單純是題目挑的太故意了 你看錯誤率王者的兩張
作者: x2159679 ((● ω ●))   2024-11-19 22:27:00
我比較好奇原PO都準備題庫了,那有題目解析嗎(′・ω・‵)
作者: sunshinecan (陽光罐頭)   2024-11-19 22:30:00
舉槍那張到底是有給AI情境還是從一堆隨機中選出來的?
作者: avans (阿緯)   2024-11-19 22:30:00
我只做20題的,印象分數40左右 哭哭輸給擲硬幣
作者: x2159679 ((● ω ●))   2024-11-19 22:32:00
舉槍那張我反而看得出來就是了,雖然的確不是常見的AI圖,這批AI圖要分辨反而從圖意比較好判斷,例如這張舉槍根本沒對在角色身上像卡比那張我就是從星星分的,這是這種分辨方法就很主觀
作者: guogu   2024-11-19 22:34:00
選難的正常啊 總不能只選NAIV1的分支模型然後說分得出來吧
作者: x2159679 ((● ω ●))   2024-11-19 22:34:00
我說的難不是AI圖的部分而是繪師的部分倒不如說AI的部分反而還好而已,我已經被推特咒術師訓練過了,我錯的大多是繪師陷阱題有常跟創作型繪師的話就會知道,他們的作品不太可能被當成AI,因為他們的作品都會有明確的表示意圖在但是純插畫,或是專門畫單體人物的繪師在AI出來後就很吃虧,因為這塊訓練最多像是這個題庫準備的那群陷阱題繪師就是影響最大的
作者: jeffguoft (十年磨一劍)   2024-11-19 22:39:00
我是覺得選圖很刻意,AI圖都故意挑風格特殊的,導致判斷困難
作者: x2159679 ((● ω ●))   2024-11-19 22:40:00
所以我才覺得難的是繪師那部分啊
作者: Bugquan (靠近邊緣)   2024-11-19 22:41:00
這不就是很多人說AI的畫風很相似,真給你挑不一樣的,就很難分辨了
作者: guogu   2024-11-19 22:45:00
所以這表示很多人說的分得出來基本是假的
作者: x2159679 ((● ω ●))   2024-11-19 22:45:00
AI畫風很相似的是最主流的那群,不一樣的那些你也不太會看到,因為他們沒啥流量能蹭
作者: guogu   2024-11-19 22:46:00
只是有幾個畫風AI常用 所以那個畫風被當成AI而已
作者: x2159679 ((● ω ●))   2024-11-19 22:46:00
但如果你推特看得夠多會知道有很多咒術師都在裝繪師,而且是有一定的方法能分辨的
作者: andyleeyuan (元哥)   2024-11-19 22:47:00
下次應該全挑六指或左右手腳畫錯的
作者: x2159679 ((● ω ●))   2024-11-19 22:47:00
很多人在意的不是分辨得出來與否的問題,而是背後的過程就像抄襲描圖你看到圖也看不出來
作者: Tsozuo   2024-11-19 22:48:00
一樣的風格看多又不同人畫得大都AI雖然現在也不少模仿畫風的 但還是有跟原作有不同的畫風
作者: x2159679 ((● ω ●))   2024-11-19 22:48:00
但也有人覺得反正圖好看就好我不在乎那麼多,那我也沒辦法說什麼,這就是見仁見智的問題但說實話,咒術師圈的和平在我看來只是建立在欺負繪師身上而已
作者: Tsozuo   2024-11-19 22:49:00
對我來說 AI圖不是爛 而是東西太像 膩了
作者: x2159679 ((● ω ●))   2024-11-19 22:49:00
這種和平只是假象,因為他們有個能一致對外欺負的對象原本繪師建立的社群能維持比較良好的風氣就是有些道德約束在就像之前有咒術師作品被拿去練LORA爆氣一樣,如果咒術師真的自詡創作者,他也不會想要自己的作品被拿去練
作者: BC8472   2024-11-19 23:01:00
代朋友回,他錯最大的2張AI圖跟水靈靈都有答對,拿了80-90分純黑白那張,要放大來看後理解線條是怎樣畫出來的,會發現有幾個連接位很奇怪,不像是人類會犯的錯誤,有畫過線犒的會懂拿槍那張,右邊角色的手條線被頭髮擋住後消失了,是AI常見錯誤水靈靈那張雖然風格很像,但是細節全對(像斑比那張衣服細節就錯了),而且沒有出現AI亂打的陰影跟亂飛的頭髮我朋友的感想是只是玩AI不夠,要手繪圖也要看得多,最好要自己有電繪經驗(他是玩了AI兩年,然後學了電繪快一年)
作者: clothg34569 (提拉米蘇冰淇淋)   2024-11-19 23:12:00
這樣反而好奇她錯的是哪幾張了如果還要在弄二版的話 看起來開頭可以給選項填繪畫 AI的經驗
作者: gijoee   2024-11-19 23:17:00
AI玩過幾天,繪畫經驗0,20題85分,錯6.15.20
作者: BC8472   2024-11-20 00:47:00
他卡比跟咖啡杯都錯了,卡比太整人,咖啡杯以為跟PVC一樣就直接選答案沒檢查
作者: kinn   2024-11-20 02:53:00
ai圖看眼睛高光一致性的判別率就可以超過70%了 其實目前很好辨認
作者: LOLI5566 (蘿莉56)   2024-11-20 03:37:00
kiwi這個真的太扯 我還認真去看起筆收筆
作者: showwhat2 (華仔)   2024-11-20 07:02:00
這個算娛樂用的,因為現在抓AI都是各方面因素和過往所有圖片抓出來認。所以遊戲美術能用AI也是因為這樣,一方面匿名有公司扛品牌損耗,一方面也確實老闆有可能這樣要求。剛剛做圖發現還有一個問題是這個沒辦法放大,AI圖放大會更好認,這個我感覺自己也不會有多少分數。
作者: gm3252 (阿綸)   2024-11-20 07:16:00
推,看來目前真的很難分出來
作者: CLisOM (tt)   2024-11-20 07:52:00
沒玩AI,20題90分,以前稍微練過繪圖,主要是十幾年天天逛P網跟看西恰AI圖,類B銀河的圖是印象這張P網沒看過就當AI,算人肉資料庫吧

Links booklink

Contact Us: admin [ a t ] ucptt.com