[閒聊] 電腦也懂手繪,美研究生開源AI模型「Pain

作者: HarunoYukino   2024-07-10 21:04:17
電腦也懂手繪,美研究生開源AI模型「PaintsUndo」重現彩圖創作歷程
https://www.4gamers.com.tw/news/detail/65845/paintsundo-a-base-model-of-drawin
g-behaviors-in-digital-paintings
縮網址:https://0rz.tw/VFhl9
https://i.imgur.com/HbvoLUA.jpg
https://imgur.com/HbvoLUA
美國史丹佛大學研究生 Lvmin Zhang(lllyasviel)7 月 9 日在 Github 發表 AI 模型
「PaintsUndo」,使用者只要導入 2D 靜態圖像就會展開「逆向工程」,從白紙草稿、上
色、陰影到作品完工,電腦自動深度偽造一整段創作過程並完整輸出成影片。
PaintsUndo 在 Github 頁面刊載多個使用實例,該模型看似能將「任何平面彩圖」的創
作歷程輸出成縮時影片,除了模仿動漫角色的 AI 插畫,最底下有用照片或真人圖像的案
例,就算本來不是插圖,也能掰出畫圖的每個步驟。
PaintsUndo 操作步驟有三,首先是把圖片上傳並生成提示,電腦會試圖理解原圖的風格
,並模仿出人類繪畫行為的畫格(Key Frames),就像畫畫過程的分鏡一樣,使用者能調
整種子畫面與其他參數,最後再輸出縮影。
PaintsUndo 處理一張圖的時間取決於使用者設定的每秒影格數(FPS)與解析度,時長
25 秒、FPS 4、解析度約 512x320、448x384 的影片,需要時間大約 5 到 10 分鐘。
由於 AI 創作演算法的訓練數據多取自網路而時常陷入智財爭議,今年 4 月新北私立復
興商工就爆出校慶師生美展首獎作品「大鬧龍宮」是用 AI 合成繪圖,當時校方請該名學
生還原繪圖過程,才發現他用 AI 拼貼圖像、或到網路取圖來「重塑」製畫。
批評者常指責 AI 作畫「沒有靈魂」,爭議點就是創作過程,因為作品是電腦生的,人類
只要下指令而非真正的手繪;但 PaintsUndo 不只能夠重現構圖歷程,甚至可以將真實照
片重新構思成畫作,彷彿把真人電繪的過程錄下來。
PaintsUndo 的開發者 lllyasviel 專門研究電腦視覺領域(Computer vision),過去曾
推出影像生成模型 Fooocus、AI 光照布局 IC-Light、素描風格繪畫模型 Style2Paints
和 ControlNet 等數款免費模型,讓使用者能輕鬆生成高品質彩圖。
其中 ControlNet 獲得領域盛事 ICCV 2023 最佳論文獎,該模型作為 Stable
Diffusion 擴展套件,可以提取原圖人物的動作與線條,來輸出不同繪畫風格且精準再現
原圖相應姿勢與輪廓的圖像。
PaintsUndo 這樣效仿人類作畫的 AI,是否會淪為騙人的手段?
lllyasviel 在 Github 解釋說該專案的目的是開發人類電繪行為的基本模型,協助未來
的 AI 更能滿足人類藝術家的創作需求,「Paints-Undo 名稱啟發自 AI 輸出的過程類似
人們在電繪軟體中多次按下『復原』鍵(通常是 Ctrl+Z)。」
「使用者可以自由地使用這個工具來創作內容,但必須遵守當地法律,並負責任地使用。
使用者不得透過這個工具製造假資訊或煽動衝突。開發者對用戶的濫用不承擔任何責任。
作者: nineflower (九日落-淚花開)   2024-07-10 21:05:00
繪師在被ai取代之前,就先被ai警察逼瘋的
作者: astrayzip   2024-07-10 21:13:00
繪師(花了五小時畫一張圖分享)警察:看就像AI
作者: guogu   2024-07-10 21:13:00
OP
作者: ikachann (喵喵)   2024-07-10 21:13:00
以後要用錄影的了
作者: jack8587 (james)   2024-07-10 21:16:00
放原速影片就好,AI仿造過程漏洞百出
作者: yellowhow (┴─┴~\( ̄□ ̄#)\)   2024-07-10 21:17:00
光明正大標出自己是AI會怎樣嘛
作者: showwhat2 (華仔)   2024-07-10 21:28:00
老繪師不證自明,現在是新人畫家比較煩惱。
作者: HarunoYukino   2024-07-10 21:30:00
之前秀逗魔導士的差畫就被爆料用AI插畫。 他算是老繪師了w
作者: showwhat2 (華仔)   2024-07-10 21:33:00
這樣講很幹話,但我老實講那是他的問題。很多老到腦袋轉不過來的,很容易打出這種損毀品牌價值的牌。
作者: cchh179 (howie)   2024-07-10 21:35:00
說不定以後連過程影片都能生成出來XD再等幾年吧
作者: lastphil (おやすミルキィ)   2024-07-10 21:36:00
警察再來就是燒繪師的自證像AI了
作者: xxxzxcvb (阿........)   2024-07-11 00:46:00
秀逗那個圖層都po出來了不是?

Links booklink

Contact Us: admin [ a t ] ucptt.com