詳解動作捕捉技術的分類_ART

FOHEART·X動作捕捉系統

FOHEART·X動作捕捉系統1.2.1步態分析的技術分類

目前主流的步態分析技術主要有以下幾種：基于計算機視覺的人體步態捕捉與分析、基于慣性傳感器的人體步態捕捉與分析、基于無線信號的人體步態捕捉與分析。基于計算機視覺的人體步態捕捉又分為基于紅外攝像頭、基于2D攝像頭、基于3D深度攝像頭等多種。上個世紀的技術路線還有基于機械式的步態捕捉。其他的技術路線還有基于電磁式的步態捕捉。

1.2.1.1基于紅外攝像頭的光學步態捕捉

紅外光學動作捕捉技術經歷數十年的持續發展，目前常用的紅外光學動作捕捉技術都是基于計算機視覺原理。紅外攝像頭的光學步態捕捉主要分為被動式和主動式。被動式是在人體關鍵部位粘貼反光標記點，主動式是在人體主要部位佩戴上可發射紅外線的主動式攝像頭。本節主要說明被動形式的光學步態捕捉。在人體的主要骨骼部位以及關節處粘貼反光標記點，利用架設好的紅外攝像頭追蹤反光標記點，從而計算出反光標記點在空間中的絕對位置。反光標記點和紅外攝像頭分別如圖1-1和圖1-2所示。

圖1-1反光標記點

Fig.1-1Reflectivemark

ARA攻擊者已將987 BNB存入Tornado Cash:金色財經消息，據CertiK官方推特發布消息稱，ARA攻擊者已將987 BNB存入Tornado Cash。

此前報道，ARA遭受閃電貸攻擊，攻擊者獲得了124,000 BUSD。[2023/7/28 16:04:36]

圖1-2紅外攝像頭

Fig.1-2Infraredcamera

反光標記點既不會接收無線信號也不會向外發射任何無線信號，它的表面涂抹了一種特殊熒光材料，可以很好地讓紅外攝像頭識別到并反射回高質量的圖像信號。

紅外攝像頭一般采用RJ45接口，通過網線連接匯聚到交換機，再由交換機統一將數據轉發到計算機。整個系統如圖1-3所示。

圖1-3基于紅外攝像頭的光學動作捕捉系統結構圖

Fig.1-3Structurediagramofopticalmotioncapturesystem

計算機的上位機軟件經過一系列的算法識別還原出人體的步態。其算法流程如圖1-4示。

圖1-4基于紅外攝像頭的光學動作捕捉系統算法流程圖

調查：五分之一的法國工人希望以加密貨幣形式收到全部或部分工資:金色財經報道，由法國Payfit進行一項調查發現，五分之一的法國工人希望以加密貨幣形式收到全部或部分工資。這一數字在年輕受訪者中甚至更高：18 至 35 歲的受訪者中，31% 表示他們“贊成”以加密貨幣形式領取工資。男性似乎是對加密貨幣最熱衷的：近四分之一的男性受訪者表示他們想要加密貨幣工資。[2023/6/28 22:04:43]

Fig.1-4Algorithmflowchartofopticalmotioncapturesystem

基于紅外攝像頭的光學步態動作捕捉系統優點是技術成熟度高，采樣頻率高，加之目前的高性能計算機數據處理速度極快所以延遲很低，且精度很高，使用范圍廣，應用領域眾多。主要缺點是對光照特別敏感，不能在光變化較大的環境下使用，周圍不能有和光學標記點相近的物體或光斑，所以光學步態捕捉一般只在室內使用。由于攝像頭的視場角有局限性，且人在運動時有的標記點很容易受到其他物體及自身的遮擋，這就造成被遮擋部位數據的丟失。后期數據處理工作量很大，由于數據量大且需要處理丟失、跳幀等問題，需要較長的后期處理時間。缺點還在于需要架設相機，相機一般架設到鋼架結構上，這就造成使用場景一般比較固定，不能輕易的挪動。一般的場景至少需要6個攝像頭，如果需要追蹤更大的場景，需要的攝像頭數量高達幾十個，且單個攝像頭價格十分價貴，比如Vicon公司生產的單個攝像頭價格高達十萬元人民幣，這就造成紅外光學式步態捕捉還是應用到科學研究方面，無法走進大眾。

目前市面上生產紅外攝像頭的光學步態捕捉的公司有英國的Vicon公司、美國NaturalPoint公司、美國MotionAnalysis公司、中國的青瞳視覺公司等。NaturalPoint公司生產的Optitrack系統如圖1-5所示。

韓國央行發布加密監管報告，認為穩定幣發行人需擁有最低資本要求和儲備資產:金色財經報道， 韓國央行發布研究報告《加密資產監管相關重大問題及立法方向》，指出穩定幣需要比其他加密資產更嚴格的監管，因為它們有可能破壞金融穩定。該報告認為應該要求穩定幣發行人擁有最低資本和儲備資產，以盡量減少數字資產風險轉移到支付和結算系統的可能性，此外加密資產業務應注冊并授權運營，并定期接受外部審計。[2022/12/8 21:29:29]

圖1-5Optitrack系統

Fig.1-5Optitracksystem

1.2.1.2基于3D深度攝像頭的動作捕捉

隨著3D深度相機技術的成熟，有許多研究者開始研究基于深度相機的動作捕捉系統。3D深度攝像頭與2D攝像頭的區別在于，除了能夠獲取平面圖像外還可以獲得深度信息。3D深度技術目前廣泛應用在人體步態識別、三維重建、SLAM等領域。目前主流的3D深度攝像頭的技術路線有：雙目立體視覺；飛行時間；結構光技術等。

雙目立體視覺即使用兩個2D平面攝像頭。兩個平面攝像頭獲得兩幅圖像，通過兩幅圖像算出深度信息。飛行時間即由雷達芯片發射出紅外激光散點，照射到物體后反射回雷達芯片的時間，由于光速已知，發射返回時間已知即可測量出攝像頭距物體的距離，。結構光是攝像頭發出特定的圖案，當被攝物體反射回這一圖案時，深度攝像頭再次接收這一圖案，通過比較發射出的圖案和接收的圖案從而測量出攝像頭距離被攝物體的深度信息。3D深度攝像頭方案對比如表1-1所示。

尼泊爾已起草必要的修正案準備發行CBDC:金色財經消息，尼泊爾已起草必要的修正案準備發行中央銀行數字貨幣（CBDC）。尼泊爾的一個工作組提議進行法律修改，允許該國中央銀行發行自己的數字貨幣，此舉是在一項研究表明這樣的舉措是可行的并建議了某些條款授權監管機構繼續實施之后做出的。

尼泊爾中央銀行打算為CBDC設計一個單獨的數字錢包，通過它可以進行數字交易。還將采取措施探索與數字支付服務提供商的互操作性。[2022/8/8 12:08:29]

表1-13D深度攝像頭方案對比

Tab.1-13Ddepthcameraschemecomparison

利用結構光方案的產品有微軟公司推出的Kinect，其廣泛的應用在體感交互、人體骨架識別、步態分析等領域。Kinect如圖1-6所示。

圖1-6微軟公司的Kinect

Fig.1-6KinectofMicrosoft

基本原理是首先找到圖像中移動的物體，然后會對移動的物體進行深度評估，識別出人體的部位，然后將其從背景環境中分割出來。分割之后要做的工作就是模式匹配，將其匹配到骨骼系統上。算法流程如圖1-7所示。

韓國元宇宙公司Anipen完成830萬美元C輪融資:7月22日消息，韓國元宇宙公司 Anipen 完成 830 萬美元（約 110 億韓元） C 輪融資，Medici Investment、Ulmus Investment和韓國開發銀行（KDB）參投。資金將用于擴大其元宇宙內容服務，并加強與全球多家公司的合作伙伴關系。

據悉，Anipen 是一家基于深度學習的元宇宙平臺開發商，專注于增強現實 (AR)、擴展現實 (XR) 和人工智能 (AI)。其旗艦服務 AnibeaR 是一個 3D 移動應用程序，允許用戶使用流行的兒童動畫角色（如 Hello Kitty 和天線寶寶）創建注入 AR 的視頻內容。（Forkast）[2022/7/22 2:30:38]

圖1-7光學動作捕捉算法流程圖

Fig.1-7Algorithmprocess

以上三種方案的3D深度攝像頭方案大部分用在娛樂級別方面，比如臉部識別解鎖、人機互動，且由于其探測距離較近，很難用在大空間上。目前基于3D深度攝像頭的芯片在不斷地研究改進中。其硬件芯片仍是目前的難點之一，再其次是算法的復雜度，大量的圖像計算對硬件的主控芯片的計算能力有較高的要求，在功耗上很難做到低功耗的工作，受制于目前的電池技術，單個傳感器的工作時間比較短。其優勢在于不需要用戶穿戴任何傳感器和粘貼標記點。利用Kinect進行人體下肢骨架識別如圖1-8所示。

圖1-8Kinect人體骨架識別

Fig.1-8Kinectforhumanskeletonrecognition

1.2.1.3基于2D攝像頭的動作捕捉

利用2D攝像頭實現3D運動軌跡的捕捉是目前的前沿技術研究。2D攝像頭即平面攝像頭，沒有深度信息。目前基于2D攝像頭的動作捕捉主要采用卷積神經網路將稀疏的2D人體姿態凸顯檢測的原理。但是此種捕捉方案需要長時間的運算，并不適合實時的運動分析，且輸出精度低。基于2D攝像頭的動作捕捉目前可以捕捉人體局部的運動姿態，且捕捉之間需要采集大量的數據樣本作為訓練數據集。2D攝像頭在深度信息的預測上存在著偏差，任何一點錯誤的數據都會導致很大的偏差，穩定性極差。最大的挑戰在于攝像頭的遮擋以及快速的運動都是2D攝像頭很難追蹤到的。其優點在于不需要任何的穿戴，且所需要的2D攝像頭觸手可得，成本極低，這對大眾化的應用是一個不錯的選擇。利用2D平面攝像頭的姿態捕捉應用如圖1-9所示。

圖1-9利用2D平面攝像頭姿態捕捉

Fig.1-9Using2Dplanarcameraattitudecapture

1.2.1.4基于MEMS慣性傳感器的慣性動作捕捉系統

基于MEMS慣性傳感器的動作捕捉系統在各個領域都有應用，包括虛擬現實、運動訓練、生物醫學工程和康復。因為它們體積小、重量輕、價格合理。

慣性動作捕捉系統主要是將慣性傳感器綁定在人身體主要骨骼上，如足、小腿、大腿，實時測量出每段骨骼的旋轉，利用正向運動學和反向運動學實時推導計算出整個人身體的運動參數。慣性動作捕捉系統的優勢在于他是一種無源的動作捕捉系統，不需要借助任何外部信息，即不受外界環境的干擾。缺點則是由于慣性傳感器普遍存在累計漂移會使慣性系統無法精確測量出運動的位移。其全身穿戴效果如圖1-10所示。

圖1-10基于MEMS慣性傳感器的慣性動作捕捉系統穿戴圖

Fig.1-10Awearableimageofinertialmotion

capturesystembasedonMEMSinertialsensor

慣性傳感器主要包括加速度計、陀螺儀、磁力計。其中加速度計、陀螺儀、磁力計多采用MEMS形式，所以稱之為MEMS慣性傳感器。三軸加速度計可以測量載體的三個軸向上的加速度，是一矢量，通過加速度我們也可以計算出載體靜止時的傾角。三軸陀螺儀可以測量出載體的三個軸向上角速度，通過對角速度積分我們可以得到角度，。三軸磁力計可以測量出周圍的磁場強度及與地球磁場的夾角。通過融合加速度、角速度、磁力值的數據我們可以精準的得到載體的旋轉。融合后的數據一般用四元數或歐拉角來表示。其中四元數形式如，歐拉角包含俯仰角、橫滾角、偏航角。得到載體的旋轉后再擬合各個骨骼的運動，從而計算出穿戴部位的運動姿態。通過對加速度、角速度的積分可以測量出穿戴者的步速、步距、步長等參數。世界上知名的MEMS慣性動作捕捉系統研發生產公司國外有荷蘭Xsens、國內的北京孚心科技公司等。綜述其原理如圖1-11所示。

圖1-11慣性動作捕捉系統原理圖

Fig.1-11Schematicdiagramofinertialmotioncapturesystem

基于MEMS慣性傳感器的動作捕捉系統的步態分析有很大的優勢，主要體現在由于慣性動作捕捉系統采用的是MEMS芯片，成本較低，每個芯片只需要十元左右，整套系統的價格在幾萬元級別。由于慣性動作捕捉系統是一種無源的系統，整套系統的重量在幾千克的范圍內，所以便于攜帶，且不需要架設繁雜的相機。慣性傳感器只需要開機后就可以使用，沒有繁雜的校準、標定等操作步驟，所以使用十分便捷。慣性動作捕捉系統不受使用環境的影響，不管在室內、還是室外都可以正常使用。但是MEMS傳感器的精度相比于光學動作捕捉系統來講，精度較低，但對于大眾人群已經完全滿足其需求。由于MEMS式陀螺儀存在零偏且在動態情況下積分累計誤差會隨著時間的推移而產生較大的漂移。MEMS加速度計在不同的狀態下也存在誤差，特別是在高動態下。磁力計很容易受到強磁環境的干擾。但是這一系列的誤差問題都可以通過算法來補償。MEMS式慣性傳感器補償后的靜態精度一般可達到：俯仰角/橫滾角≤0.2°,偏航角≤1°；動態精度：俯仰角/橫滾角≤0.5°,偏航角≤2°，步態位移誤差可達5%。已滿足步態參數計算的精度要求。

1.2.1.5其他技術路線

機械式動作捕捉依靠穿戴在人身體的機械裝置來測量關節角度以及位移。人體運動帶動機械裝置的運動，從機械裝置上的角度傳感器可以知道運動角度，根據角度和機械部位的長度從而計算出移動位移。這一技術最早出現在20世紀，由于機械結構的笨重，在步態分析方面機械動作捕捉早已退出發展的主流。但利用機械外骨骼的搬運發展成了主流。其形狀如圖1-12所示。

圖1-12機械式動作捕捉

Fig.1-12Mechanicalmotioncapture

其他的技術路線還有基于聲學式的動作捕捉，基于電磁式的動作捕捉等。

Tags：EMSMEMARTEMS幣EMS價格MEM幣MEM價格ART價格ART幣

MATIC