顯示廣告
隱藏 ✕
※ 本文轉寄自 ptt.cc 更新時間: 2021-10-15 11:22:16
看板 C_Chat
作者 lumaix (lumaix)
標題 [Vtub] 目前是不是還不能精確辨識臉部表情?
時間 Fri Oct 15 10:09:00 2021


回顧哈洽馬初配信

心心的五官兩隻眼睛跟眉毛可以別開動

但也發現常常眼睛跟眉毛會不同步

有時眼睛或眉毛會亂動 表情也會很怪

https://i.imgur.com/NHZr62e.jpg
[圖]

但後來好像有修正

後來哈洽馬的眼睛跟眉毛連動表情也比較自然

https://i.imgur.com/FsnZyMP.jpg
[圖]

不過後來好像就再也沒出現過舊的臉部辨識系統

就跟Miko 的3D手一樣

所有說目前VT所使用的系統

是不是還不能精確的辨識臉部表情?



--
--
※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 36.239.186.120 (臺灣)
※ 文章代碼(AID): #1XQEA-aJ (C_Chat)
※ 文章網址: https://www.ptt.cc/bbs/C_Chat/M.1634263742.A.913.html
wizardfizban: 看設備1F 10/15 10:10
tom11725: 太精準其實也是壞事就是,可能會產生不必要的誤會2F 10/15 10:11
vivianqq30: 看設備的捕捉如何判斷啊 眼睛大小 光影 眼鏡都會影響3F 10/15 10:13
vivianqq30: 吧
ghostxx: 如果你要單指Holo是,純論技術不是5F 10/15 10:13
utcn92: 單純hololive技術不到家6F 10/15 10:15
we15963: 之前不是有出過能非常精準判別表情的設備 只是鄉民說太過7F 10/15 10:15
we15963: 恐怖谷 然後後來就沒消息了嗎?9F 10/15 10:16
allen20937: 看遊戲一堆精準的動態捕捉就知道這問題是錢砸的夠不夠10F 10/15 10:18
allen20937: 多,需不需要用到的問題
wizardfizban: 太好的設備貴 頭戴式設備則是累 戴著長期使用不好12F 10/15 10:19
leeberty: https://youtu.be/zg4LPhl5ihw 這個Miko表情就很有戲13F 10/15 10:20
aria0520: 先不提其他企業勢 有些個人勢的捕捉技術超猛的14F 10/15 10:22
stinger5009: 可以是可以 但是真的也沒必要太精準15F 10/15 10:22
aria0520: 個人勢只需要顧自己所以可以使用最新技術16F 10/15 10:22
aria0520: 企業勢有時會遇到向下相容的問題
gungriffon: 鯊鯊初期也會抖眼皮 然後羽衣媽媽的是有強制雙眼同步18F 10/15 10:22
gungriffon: 眨眼功能 有一次念棉花糖觀眾問能不能眨眼wink她說目
gungriffon: 前在用的LIVE2D有同步雙眼眨眼所以沒辦法閉單眼
gungriffon: 應該不只是只有羽衣有這功能 所以這是可以選掛的
CactusFlower: 眼皮會抖應該是開闔的曲線沒拉好 L2D可以設定好幾個22F 10/15 10:25
CactusFlower: 開闔比例的節點 要怎麼跟皮對應完全是可以自己拉的
arrenwu: 你在討論「捕捉技術」前 要先講清楚你的設備24F 10/15 10:26
s9018124: 未來明的捕捉系統連舌頭都捕捉的到 雖然超級用不到的25F 10/15 10:26
gungriffon: 有些規模比較小的V還是會眨眼不同步或是抖眼皮 就是調26F 10/15 10:26
gungriffon: 整的細節有差別
arrenwu: Hololive就我所知道是一支手機放得遠遠的28F 10/15 10:27
a22122212: 過度精準反而沒必要29F 10/15 10:28
guogu: 如果是3d對3d可能會簡單一點 目前2d基本都是live2d30F 10/15 10:29
guogu: live2d的運作模式不管捕捉的再準要再現都是很困難的
stinger5009: 不自然眨眼有些是她們戴眼鏡抓不到眼睛造成的32F 10/15 10:29
shigurew: 目前的技術只要花錢就可以絕對精準,就看你要多複雜而已33F 10/15 10:30
wizardfizban: Hololive是用自家軟體捕捉鏡頭畫面來運算的34F 10/15 10:31
wizardfizban: 所以還有手動控制的部份
winklly: 還有就是設備對中之人的負擔吧36F 10/15 10:31
wizardfizban: 因此Hololive的v加入都會發工作機iPhone一台37F 10/15 10:31
handlin: Holo是手機捕捉吧 我記得38F 10/15 10:31
aria0520: 那就是iphone內建的face detection 虹ho都是39F 10/15 10:32
iwinlottery: Fps都很低40F 10/15 10:32
aria0520: 算是最容易上手的解決方案41F 10/15 10:32
u571530: 為什麼手都不出來玩了,有手超好笑的42F 10/15 10:32
mimimi950: 現在用ToF或結構光技術可以把面部動作偵測到超精細的43F 10/15 10:33
mimimi950: 肌肉隨便動一下都看的出來
aria0520: 用iphone的原因是iphone有3D cam45F 10/15 10:33
aria0520: android有3d cam的手機單手都數得出來
aria0520: 而且大多是對岸牌(華為)
guogu: 目前其實不是抓不到就是了 而是做到100%跟真人同步48F 10/15 10:35
guogu: 會很不二次元 在臉上定位後怎麼準換成二次元風格才是重點
guogu: 她們那些表情要讓真人做會做到臉部抽筋的
corlos: 3d才行 2d大部分要切表情 只抓眉毛跟嘴巴51F 10/15 10:36
kerycheng: 我記得齁的2D有做表情鍵能切換表情52F 10/15 10:38
guogu: 2d目前是因為主流是live2d 其實變化是在一個軸上移動53F 10/15 10:38
aria0520: face detecion其實各種model的準確度都差不多了54F 10/15 10:39
aria0520: 主要的差別是在live2d的調教上
aria0520: 例如反饋調太高就會像舞龍舞獅
guogu: 目前主流讓你覺得表情豐富的2d基本上都有做表情切換57F 10/15 10:40
moritsune: 太精準就沒有why is she angry這種meme了58F 10/15 10:40
aria0520: iphone沒有內建人臉情緒辨識的model api59F 10/15 10:41
aria0520: 所以變成這就要v這邊去做 有人覺得他們會為了這個
aria0520: 去搞個ai team專門train 情緒model嗎 應該是不會
Amychen: 我也很懷念miko的手手= =62F 10/15 10:41
aria0520: 更別提情緒類的model目前來說準確度實在低63F 10/15 10:42
shigurew: 你要想情緒model有了又如何,直播中有什麼特殊的情緒?64F 10/15 10:42
rabbit61677: 設備有技術也有,但還要考慮長時間直播舒適度吧65F 10/15 10:42
aria0520: 敏感度低全吐netural 敏感度高一秒從anger變happy66F 10/15 10:42
rabbit61677: 現在L2D最簡單就一隻手機搞定,就算外出連動也方便67F 10/15 10:42
rabbit61677: 如果像推文的追蹤設備,能連續戴著多久
rabbit61677: 外出好不好帶等等問題,只能說這是要取捨的
aria0520: 所以目前情況 表情按鈕還是比較好上手的解決方案70F 10/15 10:43
tmwolf: 眼鏡差蠻多的,因為光點會影響mapping71F 10/15 10:43
Cishang: 你把臉部貼滿偵測裝備應該就可以惹72F 10/15 10:43
CactusFlower: 靠北 舞龍舞獅害我嗆到wwww73F 10/15 10:43
shigurew: 有哪個V會一直又哭又生氣又笑的,90%都只有普通&笑而已74F 10/15 10:44
aria0520: 這就有被V拿去玩梗 "我們再怎麼難過 也還是帶著笑容"75F 10/15 10:44
guogu: 不要說ai 人都不一定能精準判斷別人情緒了76F 10/15 10:44
EAFV: 單純是holo技術不足 技術純熟的公司連掉根睫毛都可以捕捉77F 10/15 10:45
aria0520: 這就看你用哪種face detection,基於ai的solution78F 10/15 10:45
aria0520: 眼鏡沒什麼影響 基於結構光的mapping可能會有
D2Diyus: 建模師的手法好像也有影響的樣子80F 10/15 10:45
aria0520: 個人覺得live2d方的調教影響遠大於detection端81F 10/15 10:46
guogu: 我是建議可以去玩玩看免費的live2d啦 就會懂問題在哪了82F 10/15 10:47
aria0520: 要讓情緒類model完全反饋需要作出很浮誇的動作就是83F 10/15 10:48
aria0520: 現階段是不如一個表情按鈕
guogu: live2d產生的限制其實比捕捉端大非常多85F 10/15 10:49
as3366700: 一個哀鳳而已是要捕捉多精確,更專業的捕捉設備戴著打86F 10/15 11:12
as3366700: 遊戲是在自虐吧
minagi: 人的表情沒有皮這麼大88F 10/15 11:12

--
※ 看板: ACG 文章推薦值: 0 目前人氣: 0 累積人氣: 336 
作者 lumaix 的最新發文:
點此顯示更多發文記錄
分享網址: 複製 已複製
r)回覆 e)編輯 d)刪除 M)收藏 ^x)轉錄 同主題: =)首篇 [)上篇 ])下篇