2020 : 面部捕捉動畫/跟蹤平臺Faceware Studio
今天想給大家介紹一款實時面部動畫/跟蹤平臺Faceware Studio。
無標記3D面部動作捕捉解決方案的領先開發(fā)商Faceware Technologies最近發(fā)布了一種用于創(chuàng)建高質量面部動畫的新平臺Faceware Studio，其利用創(chuàng)建即時面部動畫的方式重新定義了實時工作流程，通過機器學習和神經網(wǎng)絡技術實時跟蹤人臉并創(chuàng)建面部動畫。
作為一個新產品，F(xiàn)aceware Studio替代了以前的Faceware Live Server產品。FacewareStudio通過利用機器學習和卷積神經網(wǎng)絡技術可以快速校準、跟蹤和顯示任何人的臉部實時動畫，且這些數(shù)據(jù)可以流式傳輸?shù)紽aceware支持的虛幻引擎（UE4）、Unity、MotionBuilder和Autodesk Maya插件中。這個工具也可以讓藝術家根據(jù)演員的獨特表現(xiàn)來調整和定制動畫，并通過Motion Effects建立附加邏輯與運動效果。
Faceware Studio目前與構建在Faceware Analyzer和ReTargeter上的非實時Faceware流程并駕齊驅，可直接用于實時應用程序，將來這項技術會得到擴展，與傳統(tǒng)流程工具結合到一起使用。
Faceware支持使用網(wǎng)絡攝像頭或頭戴式攝像頭
//主要功能
Tracking Any Face（面部跟蹤）
Faceware Studio只需單擊校準就可以跟蹤面部，并為面部表情設置動畫，其中用到的神經網(wǎng)絡技術可以通過實時攝像頭或預先錄制好的視頻輕松識別角色面部。Faceware Studio可實現(xiàn)交互、虛擬制作和大規(guī)模的內容創(chuàng)建。
Advanced Tuning（強大的調整功能）
Studio的界面，右側有調整變量
藝術家可利用“Animation Tuning”（動畫調整）功能對角色特定配置文件進行可視化調整，還能提供所需的反饋和工具，根據(jù)演員的獨特表演定制動畫。
Motion Effects（動態(tài)效果）
Motion Effects是一個功能強大的系統(tǒng)，可在實時數(shù)據(jù)流中構建其他邏輯，效果可用于處理數(shù)據(jù)，使過程完全按照用戶的想法執(zhí)行，從而盡可能地直接控制最終動畫。
Animate Any Character（為角色制作動畫）
Faceware Studio可以自由設置任何角色綁定的動畫，將Studio標準控件映射到定制角色上，就可以將面部動畫數(shù)據(jù)流導入到虛擬引擎、Unity和MotionBuilder受Faceware支持的插件中，這一功能不久之后在Maya中也可以實現(xiàn)。
//工作流程
Realtime Setup（實時設置）
使用“實時設置”面板來選擇要跟蹤的攝像機、圖像序列或預先錄制的視頻。然后使用面板中的控件調整各種選項，例如幀速率、分辨率和旋轉。根據(jù)輸入內容選擇Stationary或Professional Headcam模型，Pathfinder功能會提醒用戶實時設置是否為設置。
Calibration&Tracking（校準&跟蹤）
左邊是Faceware Studio，右邊是輸出到UE4的輸出
完成實時設置后，Tracking視窗開始顯示畫面。為了校準跟蹤，角色需要在合適的構圖位置，對焦且保持中立姿勢。如果使用的是預先錄制的媒體，需要找到合適位置的圖像，然后使用“ Calibrate Neutral Pose”按鈕開始跟蹤。
Tune Your Animation（調整動畫）
Animation Tuning面板包括面部跟蹤時的每個表情及其對應值的列表，用戶可通過彩色條獲取有關每種表情的即時反饋，單擊并拖動滑塊以增加或減少每種表情的效果。還可以在“ Motion Effects”面板中使用隨帶的效果來增強數(shù)據(jù)，或使用Python在每個空間基礎上創(chuàng)建自己的自定義效果。
Stream to Engine（導入到引擎中）
“Streaming”面板為用戶提供了眾多選項來啟用和自定義數(shù)據(jù)流，要從Faceware Studio傳輸動畫數(shù)據(jù)，需要在引擎中配置受Faceware 支持的插件，單擊“Stream to Client”以查看角色動畫。
Faceware官方表示，他們的愿景是使創(chuàng)建面部動畫的過程快速而又有趣，而Studio僅僅是個開始。如果感興趣的話，可以詳細了解一下！
推荐
-
-
QQ空间
-
新浪微博
-
人人网
-
豆瓣
