PTT推薦

[Vtub] 目前是不是還不能精確辨識臉部表情?

看板C_Chat標題[Vtub] 目前是不是還不能精確辨識臉部表情?作者
lumaix
(lumaix)
時間推噓46 推:48 噓:2 →:60

回顧哈洽馬初配信

心心的五官兩隻眼睛跟眉毛可以別開動

但也發現常常眼睛跟眉毛會不同步

有時眼睛或眉毛會亂動 表情也會很怪

https://i.imgur.com/NHZr62e.jpg

圖 目前是不是還不能精確辨識臉部表情?

但後來好像有修正

後來哈洽馬的眼睛跟眉毛連動表情也比較自然

https://i.imgur.com/FsnZyMP.jpg

圖 目前是不是還不能精確辨識臉部表情?

不過後來好像就再也沒出現過舊的臉部辨識系統

就跟Miko 的3D手一樣

所有說目前VT所使用的系統

是不是還不能精確的辨識臉部表情?



--

※ PTT留言評論
※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 36.239.186.120 (臺灣)
PTT 網址

wizardfizban10/15 10:10看設備

tom1172510/15 10:11太精準其實也是壞事就是,可能會產生不必要的誤會

vivianqq3010/15 10:13看設備的捕捉如何判斷啊 眼睛大小 光影 眼鏡都會影響

vivianqq3010/15 10:13

ghostxx10/15 10:13如果你要單指Holo是,純論技術不是

utcn9210/15 10:15單純hololive技術不到家

we1596310/15 10:15之前不是有出過能非常精準判別表情的設備 只是鄉民說太過

CactusFlower10/15 10:15https://youtu.be/MPcXPJzwric

we1596310/15 10:16恐怖谷 然後後來就沒消息了嗎?

allen2093710/15 10:18看遊戲一堆精準的動態捕捉就知道這問題是錢砸的夠不夠

allen2093710/15 10:18多,需不需要用到的問題

wizardfizban10/15 10:19太好的設備貴 頭戴式設備則是累 戴著長期使用不好

leeberty10/15 10:20https://youtu.be/zg4LPhl5ihw 這個Miko表情就很有戲

aria052010/15 10:22先不提其他企業勢 有些個人勢的捕捉技術超猛的

stinger500910/15 10:22可以是可以 但是真的也沒必要太精準

aria052010/15 10:22個人勢只需要顧自己所以可以使用最新技術

aria052010/15 10:22企業勢有時會遇到向下相容的問題

gungriffon10/15 10:22鯊鯊初期也會抖眼皮 然後羽衣媽媽的是有強制雙眼同步

gungriffon10/15 10:23眨眼功能 有一次念棉花糖觀眾問能不能眨眼wink她說目

gungriffon10/15 10:23前在用的LIVE2D有同步雙眼眨眼所以沒辦法閉單眼

gungriffon10/15 10:24應該不只是只有羽衣有這功能 所以這是可以選掛的

CactusFlower10/15 10:25眼皮會抖應該是開闔的曲線沒拉好 L2D可以設定好幾個

CactusFlower10/15 10:26開闔比例的節點 要怎麼跟皮對應完全是可以自己拉的

arrenwu10/15 10:26你在討論「捕捉技術」前 要先講清楚你的設備

s901812410/15 10:26未來明的捕捉系統連舌頭都捕捉的到 雖然超級用不到的

gungriffon10/15 10:26有些規模比較小的V還是會眨眼不同步或是抖眼皮 就是調

gungriffon10/15 10:26整的細節有差別

arrenwu10/15 10:27Hololive就我所知道是一支手機放得遠遠的

a2212221210/15 10:28過度精準反而沒必要

guogu10/15 10:29如果是3d對3d可能會簡單一點 目前2d基本都是live2d

guogu10/15 10:29live2d的運作模式不管捕捉的再準要再現都是很困難的

stinger500910/15 10:29不自然眨眼有些是她們戴眼鏡抓不到眼睛造成的

shigurew10/15 10:30目前的技術只要花錢就可以絕對精準,就看你要多複雜而已

wizardfizban10/15 10:31Hololive是用自家軟體捕捉鏡頭畫面來運算的

wizardfizban10/15 10:31所以還有手動控制的部份

winklly10/15 10:31還有就是設備對中之人的負擔吧

wizardfizban10/15 10:31因此Hololive的v加入都會發工作機iPhone一台

handlin10/15 10:31Holo是手機捕捉吧 我記得

aria052010/15 10:32那就是iphone內建的face detection 虹ho都是

iwinlottery10/15 10:32Fps都很低

aria052010/15 10:32算是最容易上手的解決方案

u57153010/15 10:32為什麼手都不出來玩了,有手超好笑的

mimimi95010/15 10:33現在用ToF或結構光技術可以把面部動作偵測到超精細的

mimimi95010/15 10:33肌肉隨便動一下都看的出來

aria052010/15 10:33用iphone的原因是iphone有3D cam

aria052010/15 10:33android有3d cam的手機單手都數得出來

aria052010/15 10:34而且大多是對岸牌(華為)

guogu10/15 10:35目前其實不是抓不到就是了 而是做到100%跟真人同步

guogu10/15 10:35會很不二次元 在臉上定位後怎麼準換成二次元風格才是重點

guogu10/15 10:35她們那些表情要讓真人做會做到臉部抽筋的

corlos10/15 10:363d才行 2d大部分要切表情 只抓眉毛跟嘴巴

kerycheng10/15 10:38我記得齁的2D有做表情鍵能切換表情

guogu10/15 10:382d目前是因為主流是live2d 其實變化是在一個軸上移動

aria052010/15 10:39face detecion其實各種model的準確度都差不多了

aria052010/15 10:39主要的差別是在live2d的調教上

aria052010/15 10:39例如反饋調太高就會像舞龍舞獅

guogu10/15 10:40目前主流讓你覺得表情豐富的2d基本上都有做表情切換

moritsune10/15 10:40太精準就沒有why is she angry這種meme了

aria052010/15 10:41iphone沒有內建人臉情緒辨識的model api

aria052010/15 10:41所以變成這就要v這邊去做 有人覺得他們會為了這個

aria052010/15 10:41去搞個ai team專門train 情緒model嗎 應該是不會

Amychen10/15 10:41我也很懷念miko的手手= =

aria052010/15 10:42更別提情緒類的model目前來說準確度實在低

shigurew10/15 10:42你要想情緒model有了又如何,直播中有什麼特殊的情緒?

rabbit6167710/15 10:42設備有技術也有,但還要考慮長時間直播舒適度吧

aria052010/15 10:42敏感度低全吐netural 敏感度高一秒從anger變happy

rabbit6167710/15 10:42現在L2D最簡單就一隻手機搞定,就算外出連動也方便

rabbit6167710/15 10:42如果像推文的追蹤設備,能連續戴著多久

rabbit6167710/15 10:42外出好不好帶等等問題,只能說這是要取捨的

aria052010/15 10:43所以目前情況 表情按鈕還是比較好上手的解決方案

tmwolf10/15 10:43眼鏡差蠻多的,因為光點會影響mapping

Cishang10/15 10:43你把臉部貼滿偵測裝備應該就可以惹

CactusFlower10/15 10:43靠北 舞龍舞獅害我嗆到wwww

shigurew10/15 10:44有哪個V會一直又哭又生氣又笑的,90%都只有普通&笑而已

aria052010/15 10:44這就有被V拿去玩梗 "我們再怎麼難過 也還是帶著笑容"

guogu10/15 10:44不要說ai 人都不一定能精準判斷別人情緒了

EAFV10/15 10:45單純是holo技術不足 技術純熟的公司連掉根睫毛都可以捕捉

aria052010/15 10:45這就看你用哪種face detection,基於ai的solution

aria052010/15 10:45眼鏡沒什麼影響 基於結構光的mapping可能會有

D2Diyus10/15 10:45建模師的手法好像也有影響的樣子

aria052010/15 10:46個人覺得live2d方的調教影響遠大於detection端

guogu10/15 10:47我是建議可以去玩玩看免費的live2d啦 就會懂問題在哪了

aria052010/15 10:48要讓情緒類model完全反饋需要作出很浮誇的動作就是

aria052010/15 10:48現階段是不如一個表情按鈕

guogu10/15 10:49live2d產生的限制其實比捕捉端大非常多

as336670010/15 11:12一個哀鳳而已是要捕捉多精確,更專業的捕捉設備戴著打

as336670010/15 11:12遊戲是在自虐吧

minagi10/15 11:12人的表情沒有皮這麼大

eas06u410/15 11:34純噓二樓言論

eas06u410/15 11:35科技進步很多了 帶著才能實況的是鴿子封包嗎

rabbit6167710/15 11:46https://youtu.be/Qb-yKoZfI-A

rabbit6167710/15 11:47我是覺得穿這樣長時間直播很累啦

aria052010/15 11:48靠這個好強喔

rabbit6167710/15 11:49這種比較偏向動作表演性質的,打遊戲我覺得沒必要

suiminkusuri10/15 12:17比起表情比較好奇除了早期35是刻意的之外,有幾個v

suiminkusuri10/15 12:17常常有種頭抬很高用下巴看人的感覺(?)

guogu10/15 12:19那種喔 就鏡頭擺的位置造成的吧 可以校正

aria052010/15 12:19那就是iphone角度沒擺準的問題

aria052010/15 12:19有些人可能用手機支架放著 從下往上照

roger84041010/15 12:39反正做成案按鈕操控表情也沒人知道 技術成本又低

toulio8110/15 13:02感覺操控的比較好,像是有些人發些比較不禮貌的SC,要是

toulio8110/15 13:02直接反應很難把嫌悪臉藏住

kanzaki0s10/15 13:21holo的軟體不太行 到現在還是有人像舞龍舞獅 用facerig

kanzaki0s10/15 13:21的個人勢動起來都比較順

storyo1141310/15 14:31人臉追蹤辨識技術都著重在瞳孔和鼻子而已

ncuephysics10/15 15:17師兄反而喜歡舞龍舞獅的樣子

d092203010/15 16:33科技一定行啦 只是成本跟最後的效果好不好又是一回事

d092203010/15 16:33vt可以按鈕選表情我覺得是一個有趣的事 比較希望手手可

d092203010/15 16:33以拿出來玩

AVR010/15 18:38錢的問題