[AI] Meta Animated Drawings 把塗鴉變成動畫
https://www.techbang.com/posts/105487
Meta 開源的AI繪圖專案「Animated Drawings」:可以把你的潦草塗鴉,5步驟立刻變成動畫
janusjanus 發表於 2023年5月03日 14:30
https://i.imgur.com/gLQdxp6.png
Meta公司已經開源了一個人工智慧計畫,讓任何人都能把他們的塗鴉變得更有生機。該公司希望通過將「Animated Drawings」作為一個開放原始碼專案提供給其他開發者,他們將能夠創造出新的、更豐富的體驗。
https://i.imgur.com/TMrppyl.png
基礎人工智慧研究(FAIR)團隊最初在2021年發佈了該工具的網路版本。它只需要使用者上傳一張類似人類的單一角色的圖畫,或者選擇一個展示人物。如果你使用自己的塗鴉,你會看到一個同意書,詢問Meta是否可以使用你的畫來幫助訓練其模型,不需要提供同意也可以繼續使用這個工具。
接下來,上傳者需要手動調整一個捕捉框的大小,使之與原作緊緊相貼,介面中提供了筆和橡皮擦來調整圖紙,然後再調整關節的位置。完成這一切後,就可以看到草圖的動畫版本。你可以從四類預設的動畫中挑選:舞蹈、搞笑、跳躍和行走。
https://www.facebook.com/watch/?ref=external&v=196558752689269
動畫圖畫利用物體檢測模型、姿勢估計模型和基於圖像處理的分割方法來捕捉數字版本的圖畫。然後,它使用傳統的電腦圖形技術對圖像進行變形和製作動畫。
他們做了一個示範版的網站,在展示上線後的幾個月內,使用者已經授權Meta公司使用
160多萬張圖片用於培訓。一些人上傳了公司標誌、動漫人物、魚和毛絨動物的圖片,儘管該工具規定只有人類形象可以使用。你可以在這裡上傳你自己的塗鴉試試看。
https://sketch.metademolab.com/
5個步驟讓你的塗鴉跳起舞來
實際使用很簡單,基本上你只要用小畫家準備好一張圖片就好了,或是用手機將你孩子的塗鴉畫拍下來也可以。
1.依照指示將你的塗鴉畫上傳到網站。
https://i.imgur.com/2A6ewi3.png
2.用框線把主要的角色部分框起來。
https://i.imgur.com/Yv5ZNxP.png
3.現在他就會自動判斷這個角色的肢體骨架,如果有沒標示到的地方,你可以利用下方的工具自己再劃上來補強。
https://i.imgur.com/J23VZKQ.png
4.然後他就會產生關節。
https://i.imgur.com/t6uDlx2.png
5.最後你可以點選左邊的跳舞範本,可以看到右邊你的塗鴉隨之起舞。
https://i.imgur.com/xhFStrX.png
透過人們上傳到該工具的一系列圖像表明,人們對更廣泛的繪畫到動畫的體驗有廣泛的興趣。這在一定程度上帶動了Meta公司將該項目與大約180000張圖紙的資料集進行了開源。
Meta在一篇文章中表示:「通過將模型和程式碼作為開放原始碼發佈,這個計畫為開發者提供了一個起點,使他們能夠建立和擴展該項目,促進開放原始碼社區內的創新和協作文化。」
瞭解更多:https://github.com/facebookresearch/AnimatedDrawings
========
操作流程不出意外 是抓出骨架以後去操縱骨架
DEMO 網站開出來以後等於可以有大量免費訓練用資料
FB 這次的新玩具看起來應該比較有前途
--
05/04 23:50
但我不想看自己畫的手殘圖動起來 而是變漂亮之後還
動得帥
你可以先丟進I2I讓它變漂亮
這蠻久了最近開源其實蠻好玩的
34
[閒聊] 驚!看色圖不求人 AI是否也能畫色圖?雖然下了很農場的標題 但這一篇認真的研究論文 大家或許以為AI跟色圖很遙遠 但事實真的是這樣嗎 在一年前可能沒有錯 但經過最近的突飛猛進 故事已經進入了新的轉捩點19
Re: [閒聊] Ai 快要可以做動畫了?剛剛看到版友推這個 如果我理解無誤 代表只要給它剪影動畫 還有一個認識角色的模型 就可以生成動畫 如果效果再穩定一點16
[原神] AI派蒙:將ChatGPT虛擬角色化 + 有情緒「AI派蒙」將 ChatGPT 虛擬角色化 + 有情緒的對話,變身成你的可愛虛擬助手 (安裝教學) 真的讓人非常期待未來的 AI 世界阿!現今只要多款工具搭配一起,就能把原本只是機器 的 AI,變成更加人性化。稍早中國知名硬體評測頻道极客湾Geekerwan 釋出一款非常好8
[閒聊] 來聊聊AI輔助作畫的願景首先novel-ai過份了 手腳的問題解決了 馬賽克問題解決了 四肢亂跑的問題解決了 多人的問題也解決了 下面第三張極度nsfw注意 (全裸無露點)6
[閒聊] Epic宣布 MetaHuman Creator展開搶先體驗原文標題: Epic 宣布「MetaHuman Creator」展開搶先體驗 可輕鬆創作逼真數位人類角色 原文網址: GNN 記者 RU 報導4
Re: [問題] 剛學電繪需要每天練習嗎==?先丟個十年進化錄: 先直接回答你原本的問題: 畫圖要邊畫邊想,不知道怎麼畫的東西就找參考看著畫。 畫人就是背骨架、頭身比、看骨架練習,養成習慣畫圖時候先找參考,完稿之前先畫彩色草稿確定完稿感覺,不要想著如果被人說描圖、抄襲怎麼辦?拜託,你這個階段沒人在乎的,練習而已不是叫你商業創作。你對於物體結構,正確的骨架、美麗的線條、好看的形狀這些東西的感覺太低了所以才會瞄一眼畫但畫不出感覺,要多觀察那些大佬的圖,不是單純的看著喊好美,而是看他們比如關節曲線、物體形狀、陰影和色彩的處理法。你要先充實這些基本知識,去找理論書認真的看、教學影片和文章多看,最好能找堂課去上,你現在缺的很多東西都是素描基礎會練習到的東西3
[閒聊]上傳 AI圖 對繪圖交流平台不是壞事吧舉例很多人在用的PIXIV 很多在練手的上傳的圖 歪七扭八跟幼稚園的塗鴉一個水準 非常污染搜尋結果 尤其是剛出熱門角色圖一堆人跟風畫
49
[閒聊] 鏈鋸人185 嘔嘔嘔41
[情報] 植木的法則 時隔16年 全新讀切短篇26
[GBC] 女姛異聞錄Persona 521
[閒聊] 獵人 雷歐力揍金21
[釣魚] 索尼新專利 用AI做假帳號釣惡意用戶16
[情報] 雀魂 偶大sc 聯動紀念 送兩抽15
[問題] 竹嶋老師畫風的百合作推薦15
[原神] 所以要跳洽斯卡嗎18
[閒聊] 育碧巴塞隆納工會對返回辦公室提起訴訟14
[閒聊] 滅卻師是不是情蒐沒做完整?58
[閒聊] 我跟女友的妹妹接吻了13
[閒聊]模擬後宮體驗 BD BOX 簡單開箱12
[閒聊] 萊莎的鍊金工房 禮服萊莎 PVC簡易開箱11
[閒聊] 九日 交戰記憶 我打得很過癮11
[Vtub] HACHI 深夜歌回 #8123
[蔚藍] 今日壽星-阿慈谷 ヒフミ9
[我心] 山田杏奈濕了嗎20
[閒聊] 嘆息亡靈 蒂諾是最大亂源吧?13
[閒聊] 有斷肢做得很好的非怪物類射擊遊戲嗎?10
Re: [閒聊] 酒店女公關們的經驗談漫畫8
[Vtub] 11/25同接鬥蟲8
[蔚藍] 乃愛被催眠了8
[閒聊] 海洋奇緣2 爛番茄68 開局不太好8
[閒聊] P網全站瀏覽量排行榜 大量新人強勢進榜8
[情報] 戀愛中的小行星作者變成小行星7
[閒聊] 學生會也有洞 因為很重要7
[蔚藍]麥塊世界36
[閒聊] 黃巾之亂是怎麼蔓延全國?7
[活俠] 大師兄才是最婆、阿活的真愛 對吧?4
[情報] SHY 靦腆英雄×神魔之塔 合作確認