PTT推薦

[情報] 電腦也會手繪 開源AI模型重現創作歷程

看板C_Chat標題[情報] 電腦也會手繪 開源AI模型重現創作歷程作者
KotoriCute
(乙醯胺酚)
時間推噓16 推:17 噓:1 →:12

電腦也會手繪,美研究生開源AI模型「PaintsUndo」重現彩圖創作歷程

https://www.4gamers.com.tw/news/detail/65845

美國史丹佛大學研究生 Lvmin Zhang(lllyasviel)7 月 9 日在 Github 發表 AI 模型「PaintsUndo」,使用者只要導入 2D 靜態圖像就會展開「逆向工程」,從白紙草稿、上色、陰影到作品完工,電腦自動深度偽造一整段創作過程並完整輸出成影片。

PaintsUndo 在 Github 頁面刊載多個使用實例,該模型看似能將「任何平面彩圖」的創作歷程輸出成縮時影片,除了模仿動漫角色的 AI 插畫,最底下有用照片或真人圖像的案例,就算本來不是插圖,也能掰出畫圖的每個步驟。

PaintsUndo 操作步驟有三,首先是把圖片上傳並生成提示,電腦會試圖理解原圖的風格,並模仿出人類繪畫行為的畫格(Key Frames),就像畫畫過程的分鏡一樣,使用者能調整種子畫面與其他參數,最後再輸出縮影。

PaintsUndo 處理一張圖的時間取決於使用者設定的每秒影格數(FPS)與解析度,時長 25秒、FPS 4、解析度約 512x320、448x384 的影片,需要時間大約 5 到 10 分鐘。

由於 AI 創作演算法的訓練數據多取自網路而時常陷入智財爭議,今年 4 月新北私立復興商工就爆出校慶師生美展首獎作品「大鬧龍宮」是用 AI 合成繪圖,當時校方請該名學生還原繪圖過程,才發現他用 AI 拼貼圖像、或到網路取圖來「重塑」製畫。

批評者常指責 AI 作畫「沒有靈魂」,爭議點就是創作過程,因為作品是電腦生的,人類只要下指令而非真正的手繪;但 PaintsUndo 不只能夠重現構圖歷程,甚至可以將真實照片重新構思成畫作,彷彿把真人電繪的過程錄下來。

PaintsUndo 的開發者 lllyasviel 專門研究電腦視覺領域(Computer vision),過去曾推出影像生成模型 Fooocus、AI 光照布局 IC-Light、素描風格繪畫模型 Style2Paints 和 ControlNet 等數款免費模型,讓使用者能輕鬆生成高品質彩圖。

其中 ControlNet 獲得領域盛事 ICCV 2023 最佳論文獎,該模型作為 Stable Diffusion擴展套件,可以提取原圖人物的動作與線條,來輸出不同繪畫風格且精準再現原圖相應姿勢與輪廓的圖像

https://x.com/kiyoshi_shin/status/1810554894581207380

https://x.com/milbon_/status/1810933092645011923

PaintsUndo 這樣效仿人類作畫的 AI,是否會淪為騙人的手段?

lllyasviel 在 Github 解釋說該專案的目的是開發人類電繪行為的基本模型,協助未來的AI 更能滿足人類藝術家的創作需求,「Paints-Undo 名稱啟發自 AI 輸出的過程類似人們在電繪軟體中多次按下『復原』鍵(通常是 Ctrl+Z)。」

「使用者可以自由地使用這個工具來創作內容,但必須遵守當地法律,並負責任地使用。使用者不得透過這個工具製造假資訊或煽動衝突。開發者對用戶的濫用不承擔任何責任。」

--

※ PTT留言評論
※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 123.204.25.21 (臺灣)

※ 文章網址:
https://www.ptt.cc/C_Chat/E.7u8HhUXk8_ic

※ 編輯: KotoriCute (123.204.25.21 臺灣), 07/10/2024 17:03:38

Julian9x9x907/10 17:05可以很像 不過實際上邏輯還是一團亂

mumeisuki07/10 17:05不承擔任何責任lul 有講跟沒講一樣

sakamata07/10 17:07讀史丹佛研究怎麼詐騙w

AN9407/10 17:09厲害

zxcasd84807/10 17:10讚喔 ai繪圖多棒多棒 跟蒸汽機一樣 卻還要偽裝成人畫

zxcasd84807/10 17:10的 承認自己是ai繪圖很可恥嗎?

fuhsingeek07/10 17:11不知道欸 如果原本ai可以直接生圖

fuhsingeek07/10 17:11那為什麼還要學人類反覆抽插ctrl z呢

fuhsingeek07/10 17:11有懂哥可以解答嗎

a204a21807/10 17:12實話實說很困難嗎,一定要騙人是手繪的喔

kuninaka07/10 17:13我是蠻好奇現在比賽怎麼偵測AI

maplenight07/10 17:14這功能不就想假裝手繪而已

PunkGrass07/10 17:19這是專門做出來戳真人繪師的嗎 不然目的是什麼?

fuhsingeek07/10 17:21啊啊看懂了 ctrl z那段是指這個ai的命名緣由

fuhsingeek07/10 17:21但也不知道用ai生成作畫過程的意義在哪

fuhsingeek07/10 17:21可能就像某ai版主說的一樣騙騙外行人

mumeisuki07/10 17:21就是專門用來詐騙啊 不然弄一個繪圖過程要幹嘛==

Pep5iC0589307/10 17:30世上就是有一群人很賤 別人越說不可能 他們就越想挑

Pep5iC0589307/10 17:30戰 有人說AI繪圖不可能像人類一樣有繪圖過程 然後就

Vulpix07/10 17:32我覺得是好事,自證不用佔一堆記憶體了。

smallreader07/10 17:34怎麼沒有孫悟空大腦龍宮那張(x

widec07/10 17:53早一點開發出來 悟空比賽就過關了

Innofance07/10 18:20不錯,假繪師大喜

yatola07/10 18:35是一項除了偽裝手繪沒有任何意義的開發

frank092707/10 18:52就是拿來騙人是真人畫的,都在幹這種事了,還能怪人對A

frank092707/10 18:52I抱有負面印象嗎?

Csongs07/10 19:04其實我覺得目的不是作假成人畫,而是希望成品的品質能更好

andyleeyuan07/10 19:33很多人只想怎麼騙人,卻沒想要怎麼應用

aleezible07/10 20:28唉…詐騙就是最直觀的應用

RmaLava07/11 12:41這技術除了騙人還有什麼意義?