先直接放動畫連結跟結論...
https://www.reddit.com/r/StableDiffusion/comments/12i9qr7
靠腰....雖然打從AI繪畫出現的時候就知道很快就會有這樣的技術出現,
但這一天來的比想像的快太多...
看到這影片第一個想到的是Vtuber可能將會有革命性的改變...
以後可能Vtuber不會再是死板的表情與動作,
而是能夠即時的用AI技術將鏡頭前的大叔變成活生生的美少女。
(連聲音都可以即時變成很油的,已經有這樣的AI技術出現)
這未來有可怕...
======================================
AI將真人熱舞轉換成動畫片 流暢畫面驚豔千萬網友!
〔即時新聞/綜合報導〕現今人工智慧(AI)技術被運用的範圍越來越廣泛,並不時會出
現令人驚豔的使用方式。近日國外一名網友利用AI技術,製作一段將真人熱舞畫面轉變成
二次元動畫的影片,該片曝光不到2日,便立即吸引千萬人次瀏覽,並在Reddit、Twitter
、臉書等社群媒體被無數網友瘋傳。
一名網友在美國知名網路「Reddit」論壇 發文並PO出一段影片,只見片中一名外型亮麗
的長腿二次元美少女,隨著熱情洋溢的音樂節奏開始跳舞,而她跳出的舞蹈動作、臉上神
韻等,與畫面左上方的真人女子幾乎一模一樣,雖然仍能看到一些不自然的小瑕疵,但整
體流暢度和穩定度,超乎以往同樣用AI製作出來的類似影片。
而據原PO表示,他是用AI繪圖軟體「Stable Diffusion」裡面的外掛插件「ControlNet」
,在2月推出的新功能「Multi-ControlNet」,來製作這支長度1分15秒的影片。至於影片
的背景音樂與真人熱舞的部分,則是參考韓國女團「宇宙少女」(WJSN)在2019 年推出
的歌曲〈Boogie Up〉。
該影片曝光後,立即在網上掀起熱議,不少網友紛紛給予高度讚賞,同時也議論日新月異
的AI技術,是否會對現實動畫業、演藝圈等業界產生大幅影響,「感覺再過不久,AI可以
取代很多網紅」、「這可以讓任何作品被立即改編成動畫」、「以後會讓動畫師不用再血
汗工作,還是會直接失業呢?」、「當這項技術完全實施時,我們再也不會在社交媒體上
看到一個沒有吸引力的人」。
全文
https://news.ltn.com.tw/news/novelty/breakingnews/4269286
作者:
Amo1992 (阿莫)
2023-04-15 11:20:00腿了
作者:
ZMTL (夜風/瀟湘 VR板已經開板!)
2023-04-15 11:20:00這個一直洗才會被人家說AI都在吹XD
這第一個影響的不是Vtuber 而是動畫製作....
而且我記得這又不是即時運算做出來的但它目前不是即時的沒錯呀.....而且你提Vtuber 有沒有想過MMD可以做的很漂亮那為啥還要搞真人動捕
作者:
Iseria (Ise)
2023-04-15 11:23:00所以這段動畫花了多久時間做
作者:
astinky (此方のことが大好きだ!)
2023-04-15 11:23:00把後製跟即時混在一起了吧
後製本來就能做到很強 這個只是把「人工修改」改成「AI修改」而已
作者:
emptie ([ ])
2023-04-15 11:24:00因為只是比較便宜吧 用mmd拉動作的人力成本目前比請真人來搞還貴
作者:
astinky (此方のことが大好きだ!)
2023-04-15 11:26:00即時是資本家才玩得起,老百姓再等個五十年看看
作者:
xbit (神秘的路人甲)
2023-04-15 11:26:00ai發展很快.現在就看gpu給不給力了...
作者:
xbit (神秘的路人甲)
2023-04-15 11:28:00搞不好過幾年進化ai+超強顯卡cpu真的能即時運算出動作
作者:
guolong (+9吼溜肯)
2023-04-15 11:30:00這後製啦,要即時你大概得要好幾張老黃90卡
作者: rbull (假高尚一大堆) 2023-04-15 11:31:00
這要變商用裡面還要修圖
這東西變即時運算的也用不到現有動畫中阿不過感覺可以去發展AI風格動畫 其實應該會蠻有趣的
作者:
ashkaze (畏怕陽光)
2023-04-15 11:34:00上面那IVE轉AI的影片看了眼睛很不舒服
作者:
Mimmature (Musicians Immature)
2023-04-15 11:35:00沒辦法即時啦 大概十年內都沒辦法但是其他相關的產業會進步很快連adobe都推firefly了 以後你只要學概念不用學太多軟體實作就能創作名副其實的大創意時代
作者:
fman (fman)
2023-04-15 11:38:00不過臉和身體的連動還是看得出來違合感
好了啦 吹仔話術跟算命的一樣 反正怎麼講就是等到有
作者:
arrenwu (鍵盤的戰鬼)
2023-04-15 11:44:00這個看起來跟前面幾個沒差多少 怎麼這麼受歡迎啊XD不穿衣服看起來真的滿關鍵的真希望出個可以幫助日本TV動畫的相關進步XD
作者: jeremylouee 2023-04-15 11:48:00
.. 不就類似VT的動態捕捉
作者:
arrenwu (鍵盤的戰鬼)
2023-04-15 11:49:00但是那方向上目前沒有看到相關的進步啊
作者:
Mimmature (Musicians Immature)
2023-04-15 11:49:00要能即時處理 最關鍵的是速度跟一致性但一致性就是目前所謂的ai天生無法達成的問題有興趣可以稍微看一下目前機器學習最普遍使用的演算法最淺白的說明就知道了
作者:
arrenwu (鍵盤的戰鬼)
2023-04-15 11:50:00不然我真心覺得那塊是人力大量同時成本又要低的地方
作者: dg7158 2023-04-15 11:52:00
跳舞那個現在還做不到即時轉換吧
作者:
arrenwu (鍵盤的戰鬼)
2023-04-15 11:56:00這等級..很高嗎?
作者:
Irenicus (Jon Irenicus)
2023-04-15 11:56:00有說這影片是算了多久才算出來的嗎?
作者:
Irenicus (Jon Irenicus)
2023-04-15 11:57:00要做到能即時轉換不知道需要多可怕的硬體
作者:
arrenwu (鍵盤的戰鬼)
2023-04-15 11:57:00光臉和衣服一直跳完成度就很低了
作者:
arrenwu (鍵盤的戰鬼)
2023-04-15 12:01:00另外就是如果需要動補 那對TV動畫不知道又能有多少幫助
作者: SALEENS7LM (我愛我婆,更愛你的) 2023-04-15 12:04:00
Ai邪教徒真的很愛到處妄想別人失業捏
上面那個MV的臉都分不出到底誰是誰…要多人差別處理目前AI還有很大的難度吧
作者:
Irenicus (Jon Irenicus)
2023-04-15 12:05:00不管啦反正你們這些人都等著失業吃自己吧
作者:
Freeven (夏舞楓)
2023-04-15 12:18:00作者:
cccict (馬路柏油)
2023-04-15 12:19:00這是把每一幀丟ai畫圖在拼回影片
作者: triplee (none) 2023-04-15 12:21:00
我只覺得業界實際會怎麼運用AI結果不會是現在外界各種猜測或堅定相信的模式
大概看懂了 他每一幀每一幀都用AIimg2img在刻所以才會衣服不斷變色閃爍跟後面背景一直在變不一樣看來要克服這點最快就是裸體白背景吧 嘻
作者:
opencat (opencat)
2023-04-15 12:31:00用4個controlNet控制場景,model用animeLike25D,來玩看看
作者:
chigo520 (CHIGO)
2023-04-15 12:52:00以後該不會不用動態捕捉直接拍然後改就好了
現在早就有先真人拍再後製換掉的了這個技術就只是後製簡化
實時可能真的有可能離我們不遠 並不是算力能有突破性上升 而是AI能透過訓練不斷優化
作者:
Aeryzephyr (IN JP SYS.no chinese)
2023-04-15 13:57:00依目前來說就像mmd也能做動畫,但超級麻煩一致度又低
作者: philip81501 (笑口常開0口0) 2023-04-15 14:09:00
AI粉就是愛聳動標題
作者:
ms06 (è–°è¡£ç´«éˆ´é†¡é†¬ç¶ è)
2023-04-15 14:14:00脖子的感覺很微妙的違和?
作者:
zxc88585 (hkekq)
2023-04-15 14:21:00最先失業的應該是你這種發廢文的,lora跟controlnet的應用都兩個多月前的事了腿到現在。現在的AI,現在的AI動畫還是需要引導骨架,且做不到變形畫面,先做一個中村豐的戰鬥片段,給你i2i都不一定能生的出來
作者: Spunnyge07 (9guansan9) 2023-04-15 14:30:00
你也沒說能取代什麼?光戰鬥畫面就死一片了
作者: Arashi0731 (狂舞) 2023-04-15 14:36:00
我倒覺得5年內應該就可以了
作者: SALEENS7LM (我愛我婆,更愛你的) 2023-04-15 15:01:00
「取代手繪、取代音樂、取代寫作、取代影視、取代ACGN/3DCG到藝文娛樂創作相關所有各行各業」取代個屁
作者:
linzero (【林】)
2023-04-15 15:07:00動態捕捉以前聽說有人在弄沒裝備的,是將影片用視覺辨識方式捉出動作來建模3D動作,這有著將2D資料轉成3D資料
ThreeDPoseTracker 可以用影片擷取動作轉給你的模組用當然還是有一些限制 但那種擺拍的跳舞影片抓得蠻準的轉身也沒有問題