詳解動作捕捉技術的分類_EMS

FOHEART·X動作捕捉系統

FOHEART·X動作捕捉系統1.2.1步態分析的技術分類

目前主流的步態分析技術主要有以下幾種：基于計算機視覺的人體步態捕捉與分析、基于慣性傳感器的人體步態捕捉與分析、基于無線信號的人體步態捕捉與分析。基于計算機視覺的人體步態捕捉又分為基于紅外攝像頭、基于2D攝像頭、基于3D深度攝像頭等多種。上個世紀的技術路線還有基于機械式的步態捕捉。其他的技術路線還有基于電磁式的步態捕捉。

1.2.1.1基于紅外攝像頭的光學步態捕捉

紅外光學動作捕捉技術經歷數十年的持續發展，目前常用的紅外光學動作捕捉技術都是基于計算機視覺原理。紅外攝像頭的光學步態捕捉主要分為被動式和主動式。被動式是在人體關鍵部位粘貼反光標記點，主動式是在人體主要部位佩戴上可發射紅外線的主動式攝像頭。本節主要說明被動形式的光學步態捕捉。在人體的主要骨骼部位以及關節處粘貼反光標記點，利用架設好的紅外攝像頭追蹤反光標記點，從而計算出反光標記點在空間中的絕對位置。反光標記點和紅外攝像頭分別如圖1-1和圖1-2所示。

圖1-1反光標記點

Fig.1-1Reflectivemark

Open Campus ID將于9月14日向EDU與創世NFT持有者開放第一階段白名單:9月8日消息，Open Campus發文稱，Open Campus ID將于北京時間9月14日18:00向EDU與創世NFT持有者開放第一階段白名單，總量共1000個。Open Campus ID是SBT，可訪問Open Campus提供的教育內容，并擁有與OC ID相關的所有信息。Open Campus ID以.edu為后綴，域名可由用戶選擇，代表鏈上教育身份。[2023/9/8 13:26:50]

圖1-2紅外攝像頭

Fig.1-2Infraredcamera

反光標記點既不會接收無線信號也不會向外發射任何無線信號，它的表面涂抹了一種特殊熒光材料，可以很好地讓紅外攝像頭識別到并反射回高質量的圖像信號。

紅外攝像頭一般采用RJ45接口，通過網線連接匯聚到交換機，再由交換機統一將數據轉發到計算機。整個系統如圖1-3所示。

圖1-3基于紅外攝像頭的光學動作捕捉系統結構圖

Fig.1-3Structurediagramofopticalmotioncapturesystem

計算機的上位機軟件經過一系列的算法識別還原出人體的步態。其算法流程如圖1-4示。

CZ澄清CNBC著名“反指”Jim Cramer對幣安“好評”的截圖系P圖:9月6日消息，幣安創始人趙長鵬（CZ）在X平臺（原推特）上澄清了一張社區流傳的圖片，稱這張圖片是P的，請不要相信。該圖像系CNBC主持人Jim Cramer在2022年9月一段講話的視頻截圖，圖片字幕標注著Jim Cramer稱“趙長鵬看起來是個好人，我很看好，購買他們的代幣。”

據悉，Jim Cramer被廣泛稱為著名“反指”。[2023/9/6 13:20:32]

圖1-4基于紅外攝像頭的光學動作捕捉系統算法流程圖

Fig.1-4Algorithmflowchartofopticalmotioncapturesystem

基于紅外攝像頭的光學步態動作捕捉系統優點是技術成熟度高，采樣頻率高，加之目前的高性能計算機數據處理速度極快所以延遲很低，且精度很高，使用范圍廣，應用領域眾多。主要缺點是對光照特別敏感，不能在光變化較大的環境下使用，周圍不能有和光學標記點相近的物體或光斑，所以光學步態捕捉一般只在室內使用。由于攝像頭的視場角有局限性，且人在運動時有的標記點很容易受到其他物體及自身的遮擋，這就造成被遮擋部位數據的丟失。后期數據處理工作量很大，由于數據量大且需要處理丟失、跳幀等問題，需要較長的后期處理時間。缺點還在于需要架設相機，相機一般架設到鋼架結構上，這就造成使用場景一般比較固定，不能輕易的挪動。一般的場景至少需要6個攝像頭，如果需要追蹤更大的場景，需要的攝像頭數量高達幾十個，且單個攝像頭價格十分價貴，比如Vicon公司生產的單個攝像頭價格高達十萬元人民幣，這就造成紅外光學式步態捕捉還是應用到科學研究方面，無法走進大眾。

目前市面上生產紅外攝像頭的光學步態捕捉的公司有英國的Vicon公司、美國NaturalPoint公司、美國MotionAnalysis公司、中國的青瞳視覺公司等。NaturalPoint公司生產的Optitrack系統如圖1-5所示。

數據：8月31日以來FTX錢包轉移了超過1000萬美元加密貨幣:金色財經報道，根據區塊鏈分析平臺Arkham Intelligence的數據，自8月31日以來，FTX錢包已轉移價值623萬美元的以太幣以及超過400萬美元的山寨幣。

其中包括120萬美元的FTX代幣，價值180萬美元的Uniswap（UNI）、價值130萬美元的HXRO（HXRO）、價值55萬美元的SushiSwap（SUSHI）以及價值260,000美元的Frontier代幣（FRONT），這些代幣都通過Wormhole Bridge轉移到另一個FTX錢包。[2023/9/4 13:16:38]

圖1-5Optitrack系統

Fig.1-5Optitracksystem

1.2.1.2基于3D深度攝像頭的動作捕捉

隨著3D深度相機技術的成熟，有許多研究者開始研究基于深度相機的動作捕捉系統。3D深度攝像頭與2D攝像頭的區別在于，除了能夠獲取平面圖像外還可以獲得深度信息。3D深度技術目前廣泛應用在人體步態識別、三維重建、SLAM等領域。目前主流的3D深度攝像頭的技術路線有：雙目立體視覺；飛行時間；結構光技術等。

雙目立體視覺即使用兩個2D平面攝像頭。兩個平面攝像頭獲得兩幅圖像，通過兩幅圖像算出深度信息。飛行時間即由雷達芯片發射出紅外激光散點，照射到物體后反射回雷達芯片的時間，由于光速已知，發射返回時間已知即可測量出攝像頭距物體的距離，。結構光是攝像頭發出特定的圖案，當被攝物體反射回這一圖案時，深度攝像頭再次接收這一圖案，通過比較發射出的圖案和接收的圖案從而測量出攝像頭距離被攝物體的深度信息。3D深度攝像頭方案對比如表1-1所示。

Bit Digital 12月賺取130個比特幣:金色財經報道，紐約數字資產礦業公司Bit Digital宣布其未經審計的比特幣產量以及2022 年 12月的公司更新。2022年12 月，公司賺取130個比特幣，比上月減少10%。產量下降主要是由于某些托管地點的計劃削減活動所致。截至 2022年12月31日， BTC 和ETH的國債持有量分別為 946.6 和 8,799.9，公平市值分別約為1570 萬美元和1050 萬美元。[2023/1/7 10:59:13]

表1-13D深度攝像頭方案對比

Tab.1-13Ddepthcameraschemecomparison

利用結構光方案的產品有微軟公司推出的Kinect，其廣泛的應用在體感交互、人體骨架識別、步態分析等領域。Kinect如圖1-6所示。

圖1-6微軟公司的Kinect

Fig.1-6KinectofMicrosoft

基本原理是首先找到圖像中移動的物體，然后會對移動的物體進行深度評估，識別出人體的部位，然后將其從背景環境中分割出來。分割之后要做的工作就是模式匹配，將其匹配到骨骼系統上。算法流程如圖1-7所示。

路透社：律師因不信任巴哈馬政府拒絕分享與FTX有關的Slack、Google和AWS賬戶與數據:12月15日消息，FTX 巴哈馬業務 FTX Digital Markets 清算人已要求美國破產法官 John Dorsey 允許他們訪問與 FTX 有關的 Slack、Google 和 AWS 賬戶和數據。不過 FTX 律師 James Bromley 要求 John Dorsey 拒絕這一請求，并稱巴哈馬政府此前已經從 FTX Digital Market 的清算人那里獲得了信息，并利用這些信息從 FTX 中吸走了數字資產。

James Bromley 表示，這是危險的信號，我們不信任巴哈馬政府。目前美國破產法官 John Dorsey 已要求 FTX 律師和 FTX Digital Markets 清算人雙方要么尋找調解人，要么準備在 1 月份的法庭聽證會上出示證據。[2022/12/15 21:46:57]

圖1-7光學動作捕捉算法流程圖

Fig.1-7Algorithmprocess

以上三種方案的3D深度攝像頭方案大部分用在娛樂級別方面，比如臉部識別解鎖、人機互動，且由于其探測距離較近，很難用在大空間上。目前基于3D深度攝像頭的芯片在不斷地研究改進中。其硬件芯片仍是目前的難點之一，再其次是算法的復雜度，大量的圖像計算對硬件的主控芯片的計算能力有較高的要求，在功耗上很難做到低功耗的工作，受制于目前的電池技術，單個傳感器的工作時間比較短。其優勢在于不需要用戶穿戴任何傳感器和粘貼標記點。利用Kinect進行人體下肢骨架識別如圖1-8所示。

圖1-8Kinect人體骨架識別

Fig.1-8Kinectforhumanskeletonrecognition

1.2.1.3基于2D攝像頭的動作捕捉

利用2D攝像頭實現3D運動軌跡的捕捉是目前的前沿技術研究。2D攝像頭即平面攝像頭，沒有深度信息。目前基于2D攝像頭的動作捕捉主要采用卷積神經網路將稀疏的2D人體姿態凸顯檢測的原理。但是此種捕捉方案需要長時間的運算，并不適合實時的運動分析，且輸出精度低。基于2D攝像頭的動作捕捉目前可以捕捉人體局部的運動姿態，且捕捉之間需要采集大量的數據樣本作為訓練數據集。2D攝像頭在深度信息的預測上存在著偏差，任何一點錯誤的數據都會導致很大的偏差，穩定性極差。最大的挑戰在于攝像頭的遮擋以及快速的運動都是2D攝像頭很難追蹤到的。其優點在于不需要任何的穿戴，且所需要的2D攝像頭觸手可得，成本極低，這對大眾化的應用是一個不錯的選擇。利用2D平面攝像頭的姿態捕捉應用如圖1-9所示。

圖1-9利用2D平面攝像頭姿態捕捉

Fig.1-9Using2Dplanarcameraattitudecapture

1.2.1.4基于MEMS慣性傳感器的慣性動作捕捉系統

基于MEMS慣性傳感器的動作捕捉系統在各個領域都有應用，包括虛擬現實、運動訓練、生物醫學工程和康復。因為它們體積小、重量輕、價格合理。

慣性動作捕捉系統主要是將慣性傳感器綁定在人身體主要骨骼上，如足、小腿、大腿，實時測量出每段骨骼的旋轉，利用正向運動學和反向運動學實時推導計算出整個人身體的運動參數。慣性動作捕捉系統的優勢在于他是一種無源的動作捕捉系統，不需要借助任何外部信息，即不受外界環境的干擾。缺點則是由于慣性傳感器普遍存在累計漂移會使慣性系統無法精確測量出運動的位移。其全身穿戴效果如圖1-10所示。

圖1-10基于MEMS慣性傳感器的慣性動作捕捉系統穿戴圖

Fig.1-10Awearableimageofinertialmotion

capturesystembasedonMEMSinertialsensor

慣性傳感器主要包括加速度計、陀螺儀、磁力計。其中加速度計、陀螺儀、磁力計多采用MEMS形式，所以稱之為MEMS慣性傳感器。三軸加速度計可以測量載體的三個軸向上的加速度，是一矢量，通過加速度我們也可以計算出載體靜止時的傾角。三軸陀螺儀可以測量出載體的三個軸向上角速度，通過對角速度積分我們可以得到角度，。三軸磁力計可以測量出周圍的磁場強度及與地球磁場的夾角。通過融合加速度、角速度、磁力值的數據我們可以精準的得到載體的旋轉。融合后的數據一般用四元數或歐拉角來表示。其中四元數形式如，歐拉角包含俯仰角、橫滾角、偏航角。得到載體的旋轉后再擬合各個骨骼的運動，從而計算出穿戴部位的運動姿態。通過對加速度、角速度的積分可以測量出穿戴者的步速、步距、步長等參數。世界上知名的MEMS慣性動作捕捉系統研發生產公司國外有荷蘭Xsens、國內的北京孚心科技公司等。綜述其原理如圖1-11所示。

圖1-11慣性動作捕捉系統原理圖

Fig.1-11Schematicdiagramofinertialmotioncapturesystem

基于MEMS慣性傳感器的動作捕捉系統的步態分析有很大的優勢，主要體現在由于慣性動作捕捉系統采用的是MEMS芯片，成本較低，每個芯片只需要十元左右，整套系統的價格在幾萬元級別。由于慣性動作捕捉系統是一種無源的系統，整套系統的重量在幾千克的范圍內，所以便于攜帶，且不需要架設繁雜的相機。慣性傳感器只需要開機后就可以使用，沒有繁雜的校準、標定等操作步驟，所以使用十分便捷。慣性動作捕捉系統不受使用環境的影響，不管在室內、還是室外都可以正常使用。但是MEMS傳感器的精度相比于光學動作捕捉系統來講，精度較低，但對于大眾人群已經完全滿足其需求。由于MEMS式陀螺儀存在零偏且在動態情況下積分累計誤差會隨著時間的推移而產生較大的漂移。MEMS加速度計在不同的狀態下也存在誤差，特別是在高動態下。磁力計很容易受到強磁環境的干擾。但是這一系列的誤差問題都可以通過算法來補償。MEMS式慣性傳感器補償后的靜態精度一般可達到：俯仰角/橫滾角≤0.2°,偏航角≤1°；動態精度：俯仰角/橫滾角≤0.5°,偏航角≤2°，步態位移誤差可達5%。已滿足步態參數計算的精度要求。

1.2.1.5其他技術路線

機械式動作捕捉依靠穿戴在人身體的機械裝置來測量關節角度以及位移。人體運動帶動機械裝置的運動，從機械裝置上的角度傳感器可以知道運動角度，根據角度和機械部位的長度從而計算出移動位移。這一技術最早出現在20世紀，由于機械結構的笨重，在步態分析方面機械動作捕捉早已退出發展的主流。但利用機械外骨骼的搬運發展成了主流。其形狀如圖1-12所示。

圖1-12機械式動作捕捉

Fig.1-12Mechanicalmotioncapture

其他的技術路線還有基于聲學式的動作捕捉，基于電磁式的動作捕捉等。

Tags：EMSMEMARTEMS幣EMS價格MEM幣MEM價格ART價格ART幣

芝麻開門交易所下載