[AI] Meta Animated Drawings 把塗鴉變成動畫
https://www.techbang.com/posts/105487
Meta 開源的AI繪圖專案「Animated Drawings」:可以把你的潦草塗鴉,5步驟立刻變成動畫
janusjanus 發表於 2023年5月03日 14:30
https://i.imgur.com/gLQdxp6.png
Meta公司已經開源了一個人工智慧計畫,讓任何人都能把他們的塗鴉變得更有生機。該公司希望通過將「Animated Drawings」作為一個開放原始碼專案提供給其他開發者,他們將能夠創造出新的、更豐富的體驗。
https://i.imgur.com/TMrppyl.png
基礎人工智慧研究(FAIR)團隊最初在2021年發佈了該工具的網路版本。它只需要使用者上傳一張類似人類的單一角色的圖畫,或者選擇一個展示人物。如果你使用自己的塗鴉,你會看到一個同意書,詢問Meta是否可以使用你的畫來幫助訓練其模型,不需要提供同意也可以繼續使用這個工具。
接下來,上傳者需要手動調整一個捕捉框的大小,使之與原作緊緊相貼,介面中提供了筆和橡皮擦來調整圖紙,然後再調整關節的位置。完成這一切後,就可以看到草圖的動畫版本。你可以從四類預設的動畫中挑選:舞蹈、搞笑、跳躍和行走。
https://www.facebook.com/watch/?ref=external&v=196558752689269
動畫圖畫利用物體檢測模型、姿勢估計模型和基於圖像處理的分割方法來捕捉數字版本的圖畫。然後,它使用傳統的電腦圖形技術對圖像進行變形和製作動畫。
他們做了一個示範版的網站,在展示上線後的幾個月內,使用者已經授權Meta公司使用
160多萬張圖片用於培訓。一些人上傳了公司標誌、動漫人物、魚和毛絨動物的圖片,儘管該工具規定只有人類形象可以使用。你可以在這裡上傳你自己的塗鴉試試看。
https://sketch.metademolab.com/
5個步驟讓你的塗鴉跳起舞來
實際使用很簡單,基本上你只要用小畫家準備好一張圖片就好了,或是用手機將你孩子的塗鴉畫拍下來也可以。
1.依照指示將你的塗鴉畫上傳到網站。
https://i.imgur.com/2A6ewi3.png
2.用框線把主要的角色部分框起來。
https://i.imgur.com/Yv5ZNxP.png
3.現在他就會自動判斷這個角色的肢體骨架,如果有沒標示到的地方,你可以利用下方的工具自己再劃上來補強。
https://i.imgur.com/J23VZKQ.png
4.然後他就會產生關節。
https://i.imgur.com/t6uDlx2.png
5.最後你可以點選左邊的跳舞範本,可以看到右邊你的塗鴉隨之起舞。
https://i.imgur.com/xhFStrX.png
透過人們上傳到該工具的一系列圖像表明,人們對更廣泛的繪畫到動畫的體驗有廣泛的興趣。這在一定程度上帶動了Meta公司將該項目與大約180000張圖紙的資料集進行了開源。
Meta在一篇文章中表示:「通過將模型和程式碼作為開放原始碼發佈,這個計畫為開發者提供了一個起點,使他們能夠建立和擴展該項目,促進開放原始碼社區內的創新和協作文化。」
瞭解更多:https://github.com/facebookresearch/AnimatedDrawings
========
操作流程不出意外 是抓出骨架以後去操縱骨架
DEMO 網站開出來以後等於可以有大量免費訓練用資料
FB 這次的新玩具看起來應該比較有前途
--
05/04 23:50
但我不想看自己畫的手殘圖動起來 而是變漂亮之後還
動得帥
你可以先丟進I2I讓它變漂亮
這蠻久了最近開源其實蠻好玩的
34
[閒聊] 驚!看色圖不求人 AI是否也能畫色圖?雖然下了很農場的標題 但這一篇認真的研究論文 大家或許以為AI跟色圖很遙遠 但事實真的是這樣嗎 在一年前可能沒有錯 但經過最近的突飛猛進 故事已經進入了新的轉捩點19
Re: [閒聊] Ai 快要可以做動畫了?剛剛看到版友推這個 如果我理解無誤 代表只要給它剪影動畫 還有一個認識角色的模型 就可以生成動畫 如果效果再穩定一點16
[原神] AI派蒙:將ChatGPT虛擬角色化 + 有情緒「AI派蒙」將 ChatGPT 虛擬角色化 + 有情緒的對話,變身成你的可愛虛擬助手 (安裝教學) 真的讓人非常期待未來的 AI 世界阿!現今只要多款工具搭配一起,就能把原本只是機器 的 AI,變成更加人性化。稍早中國知名硬體評測頻道极客湾Geekerwan 釋出一款非常好8
[閒聊] 來聊聊AI輔助作畫的願景首先novel-ai過份了 手腳的問題解決了 馬賽克問題解決了 四肢亂跑的問題解決了 多人的問題也解決了 下面第三張極度nsfw注意 (全裸無露點)6
[閒聊] Epic宣布 MetaHuman Creator展開搶先體驗原文標題: Epic 宣布「MetaHuman Creator」展開搶先體驗 可輕鬆創作逼真數位人類角色 原文網址: GNN 記者 RU 報導4
Re: [問題] 剛學電繪需要每天練習嗎==?先丟個十年進化錄: 先直接回答你原本的問題: 畫圖要邊畫邊想,不知道怎麼畫的東西就找參考看著畫。 畫人就是背骨架、頭身比、看骨架練習,養成習慣畫圖時候先找參考,完稿之前先畫彩色草稿確定完稿感覺,不要想著如果被人說描圖、抄襲怎麼辦?拜託,你這個階段沒人在乎的,練習而已不是叫你商業創作。你對於物體結構,正確的骨架、美麗的線條、好看的形狀這些東西的感覺太低了所以才會瞄一眼畫但畫不出感覺,要多觀察那些大佬的圖,不是單純的看著喊好美,而是看他們比如關節曲線、物體形狀、陰影和色彩的處理法。你要先充實這些基本知識,去找理論書認真的看、教學影片和文章多看,最好能找堂課去上,你現在缺的很多東西都是素描基礎會練習到的東西3
[閒聊]上傳 AI圖 對繪圖交流平台不是壞事吧舉例很多人在用的PIXIV 很多在練手的上傳的圖 歪七扭八跟幼稚園的塗鴉一個水準 非常污染搜尋結果 尤其是剛出熱門角色圖一堆人跟風畫
爆
[閒聊] 立希/初華 誰是MyGO-Mujica世界最正的72
[閒聊] 哪些是你可以接受的花費68
[母雞卡] Mygo和Ave Mujica為什麼在歐美不紅?57
[鳴潮] 庫洛開香檳了 鳴潮創新版本單日營收新高56
[閒聊] mygo如果全員男性 還會紅嗎56
[實況] GodJJ/J群玩家 異星工廠蓋房子56
[mygo]愛爽 又在亂摸47
[母雞卡] 仔細想喵夢的行為可以理解?42
[閒聊] 知道台灣論壇的都幾歲了38
[閒聊] 阿北母雞卡 一天播放量4.5萬36
[閒聊] 間諜家家酒 作者 新年賀圖30
[閒聊] 大多數男性真的都像和也這樣噁心嗎?35
[閒聊] 結束樂團中誰最可能未婚懷孕?70
[推投] 女神異聞錄4 最婆跟最想啪啪的女角31
[閒聊] 一隻黏土人5600是正常的嗎?37
[妮姬] 拉毗與小紅帽30
[鳴潮] 來幫我集氣好嗎30
[鳴潮] 洛可可超爆幹可愛啊29
[閒聊]機器人三大法則,有影響到日本機人類動畫嗎28
[閒聊] 公連 新年咲戀解放&UB動畫gif28
[閒聊] 湯瑪士小火車 創作者去世 81 歲24
Re: [鳴潮] 庫洛開香檳了 鳴潮創新版本單日營收新高21
[閒聊] 石惠 活俠傳 小師妹抱枕全圖解禁48
[閒聊] 中川集團破產的話中川能扛嗎??62
[火影] 鼬到底多強?20
[閒聊] 女性人形機器人拿下skin後(恐怖慎入)19
[阿北] 票的事是不是爽世故意設的局?19
[BGD] 爽世祥子之間曾是有可能的嗎?29
[鋼彈] GQuuuuuuX的嘴19
[閒聊] 三小 原神現在怎麼長這樣