返回資訊產品發布

不是所有無標記動捕,都能進入專業工作流

人物做出一個動作,螢幕中的數位角色同步運動,骨架線條穩定貼合身體。這是無標記動作捕捉最直觀的畫面。

2026.08.276 MIN
發布:思看(Semcam Live)
分享:
不是所有無標記動捕,都能進入專業工作流

人物做出一个動作,螢幕中的數位角色同步運動,骨架线条穩定地貼合身體——这是無標記動作捕捉最直观、也最有传播力的画面。

但对專業用户来说,这个画面只能回答一个問題:系統在这一次示範中產生了動作结果。它还不能回答更重要的問題:同一任务重複十次是否穩定?多人交叉、道具遮擋或快速转身時会发生什么?資料如何定義?能否即時进入现有軟體?模型升級后,歷史資料还能否比较?一般操作員能否持續使用和维护?

因此,在我们看来,“能夠產生骨架”与“能夠进入專業工作流”之间,仍隔着一整条证据链。

这并不是说輕量化無標記工具没有價值。单影片動作產生、快速預演和素材级動畫,各有明確而合理的使用場景。我们選型解决的是另一类問題:如何让实验室、機器人資料場、训练中心、虛擬制作和互动空间,長期、穩定、可驗證地生产動作資料。

思看(Semcam Live)正是围绕这一目标打造。我们希望交付的不是一次漂亮示範,而是一套可以被重複使用、被下游系統理解、也能夠在真實專案中验收的動作資料能力。

一、專業工作流的第一道门:指标必须与任务一致

“高精度”不是一个完整的技术結論。

人体關鍵點位置誤差、關節角誤差、步态時空參數、軌跡一致性、脚底接触、多人身分保持率、刚体位姿誤差和端到端延時,回答的是不同問題。一个系統在步速和步长上表现良好,不代表髋關節横断面旋转同样准确;一段動畫看起来顺滑,也不能直接证明它适合臨床研究、機器人训练或定量動作評估。

近年的系統綜述汇总了多项三維影片無標記动捕研究。结果顯示,这类系統在部分步态時空參數和關節运动学指標上已经具备较好的應用潛力,同時也提醒使用者:不同動作、身體平面、模型定義和參考方法会显著影响結論。[1]

一项针对30名痉挛型脑瘫儿童和15名正常发育儿童的研究,也给出了更具体的邊界:無標記系統能夠较好追踪部分额状面角度,以及膝、踝的部分矢状面角度,但对个体骨盆倾斜和髋關節横断面旋转偏差的捕捉仍不充分。[2]

这些研究对我们的启示,不是简单判斷“無標記可以”或“無標記不可以”,而是把結論限定在明確的動作、人群、指標、模型与测试條件中。

我们目前公开的思看(Semcam Live)能力包括多相机三維重建、最高120fps即時輸出、端到端延時低于100ms、250个人体關鍵點,以及用于採後精細處理的HPE能力。[5][6] 这些參數分别服务于即時性、人体描述密度和採後交付,不应被压缩成一个脱离條件的“绝对精度”。实际專案仍应明確相机数量、捕捉距离、動作类型、遮擋、服装、誤差定義、參考系統和資料處理方式,再制定相应的验收指標。

專業选型的起點,不是寻找最大的參數,而是先定義最重要的任务。

二、第二道门:一次成功不够,结果必须能够重复

專業動作資料经常用于比较:训练前后、治疗前后、不同示范者、不同批次、不同算法版本,或者同一任务跨日、跨周的变化。如果系統每次標定、身體模型或軟體升級后都会产生不可解释的漂移,那么单次结果再漂亮,也很难形成可积累的证据。

重複性至少包括几个層次:

- 同一段資料重複處理,结果是否一致;

- 同一參與者在同一天重複採集,差异有多大;

- 跨日、跨操作員、跨服装條件時,结果是否仍可比较;

- 相机布局、骨架版本或算法版本变化后,歷史資料如何追溯;

- 即時结果与採後HPE结果之间,差异如何解释。

一项关于紧身与寬鬆衣物條件的可靠性研究顯示,在特定健康成人步态任务和实验條件下,影片無標記系統可以获得较好的重複性;研究同時明確指出,結論仍需扩展到其他人群和臨床情境。[3] 这种写法比一句“寬鬆衣服也能捕捉”更有價值,因为它同時说明了適用條件和证据邊界。

我们也把版本化驗證视为思看(Semcam Live)进入長期專案的必要工作。理想的重複性報告,应記錄相机与Active Center設定、軟體和模型版本、標定状态、動作、人员、服装、光照、處理模式及統計方法。模型升級之后,还要回答歷史資料是否可以重算、新旧版本是否可以直接比较,以及哪些变化来自算法、哪些来自现場條件。

真正的專業能力,不是“每次更新看起来更好”,而是每一次变化都有記錄、有度量、有解释。

三、第三道门:现场鲁棒性必须包含“失败可见”

真實任务不会始终保持示範状态。

參與者会转身、蹲伏、坐卧、跑跳和快速挥动;多人会交叉;手、腿和道具会彼此遮擋;動作会发生在捕捉区域邊緣;服装、光照和背景也会变化。视觉算法可以通过時序信息和身體先验產生连续骨架,但“连续”不一定等于“正确”。

因此,專業系統不仅要輸出结果,还要尽可能輸出结果的状态。置信度、身分状态、視野覆盖、低品質幀、出画、遮擋和異常提示,能夠帮助现場人员判斷是否需要調整機位、改变光照、重新標定或补采。若错误被平滑算法掩盖,操作員看到的画面可能更顺,却更难及時发现无效資料。

一篇面向臨床科研人员的实践文章指出,無標記动捕能夠减少受试者准备時间,但影片存储、處理時间、隱私管理,以及採後修正能力有限等問題同样需要进入实验设计;作者还建议通过额外試次降低資料不完整的风险。[4]

我们认同这种不回避問題的方法。我们的思看(Semcam Live)品牌内容不会只展示成功片段,也会逐步建立可复用的“邊界案例库”:保留输入画面、二維關鍵點、三維骨架、置信度、最終輸出和處理方法,说明問題是通过增加视角、調整光照、改变站位、重做標定、採後處理,还是重新採集解决的。

公开邊界并不会削弱專業品牌。相反,它可以让售前驗證、现場培训、技術支援和产品迭代共享同一套知识。

四、第四道门:資料必须有清楚的定义

人体骨架并不是自然界中唯一正确的座標表达。

不同系統可能採用不同的關鍵點、身體段、關節中心、骨架比例、軸向、逆運動學约束和濾波方法。两个系統都輸出“膝關節角”,其身體模型、座標系和計算过程也可能并不相同。对動畫来说,这会影响重定向;对機器人来说,这会影响座標转换与约束;对生命科學来说,这会影响研究指標能否解释和重現。

因此,專業工作流需要的不只是一个檔案,而是一份可以执行的資料契約,至少应说明:

- 座標系、单位及左右手系;

- 時間戳、幀号、采样頻率和同步方法;

- 關鍵點名称、骨架層級、參考姿态和版本;

- 置信度、缺失值、身分切换和插值規則;

- IK、濾波、平滑和重定向參數;

- 即時结果、HPE结果和最終交付資料之间的關係。

我们在思看(Semcam Live)中提供250个人体關鍵點,并面向多种骨架、參數化人體模型 / 高精度人體模型、FBX、BVH、C3D等格式提供輸出方向。[5][6] 250点意味着系統具备更密集描述人体的潛力,但不等于250个臨床解剖标记,也不代表每个点在所有動作下具有相同的不確定性。

在專案开始前,我们建议客戶先拿到与目标介面相匹配的示例資料和解析说明,用真實流程檢查骨架方向、单位、身分连续性、丢点規則和座標转换。对于C3D、高精度人體模型或行业骨架,还应確認字段含义和目标軟體的模型定義,避免“檔案可以打开”却不能正确使用。

五、第五道门:接口不是兼容列表,而是一条跑通的任务链

在产品页面列出ROS、Python、MuJoCo、NVIDIA Isaac、OpenSim、Unreal Engine或Unity,只能说明連接方向。專業客戶真正需要的,是从思看(Semcam Live)輸出到目标系統之间的一条可执行链路。

以ROS 2为例,Topic採用發布-訂閱方式传递连续資料,但工程接入还需要定義訊息结构、QoS、發布頻率、時間戳、座標幀和異常状态。[7] MuJoCo用于物理仿真,而人体骨架仍需映射到具体模型的自由度、關節限制和控制逻辑。[8] 同样,OpenSim、Visual3D、Unreal Engine与Unity也各有模型、单位、骨架和版本要求。

因此,我们判斷“介面是否可用”時,不只看Logo,而看四件事:

1. 是否有明確版本、字段和坐標定義;

2. 是否有示例工程、示例資料和预期輸出;

3. 是否能夠重現一个完整任务,而不只是建立連接;

4. 出现斷線、延時、丢幀或版本不相容時,是否有诊断方法。

我们面向機器人、生命科學、動畫与即時互动軟體提供連接能力,但具体版本、字段和適配范围,应以对应技术文档和專案驗證为准。我们会持續补充任务型教學,例如ROS 2即時骨架、人体与Goku刚体的同步訊息、Python批次读取HPE、C3D进入分析軟體、FBX进入即時引擎,以及模型映射与常见错误處理。

介面的價值,不是让相容清單更长,而是縮短客戶从“拿到資料”到“完成任务”的距离。

六、第六道门:即時、採後处理和最终交付必须分清

專業现場往往同時需要三类结果:

- 即時结果:用于现場預覽、互动驱动、品質檢查和即時輸出;

- 採後结果:使用更多計算處理关键片段,追求更穩定或更精細的資料;

- 最終交付:经过骨架映射、重定向、人工檢查或行业軟體處理后的業務结果。

这三类结果不能互相替代,也不能用其中一类的指標证明另一类的性能。

在思看(Semcam Live)中,我们把即時链路与HPE採後處理分开。即時系統服务现場反馈与資料流动,HPE服务採集后的精細處理。[5][6] 角色重定向后的動畫画面,也不能反向证明原始骨架的测量誤差,因为角色约束、足底锁定和人工清理都可能改变最終观感。

同样,产品和功能状态也必须透明。正式上市、预發布、Beta、概念驗證和合作开发,代表不同的可交付程度;公开參數、内部测试和第三方驗證,也代表不同的证据等级。我们会尽量让产品状态、適用版本和驗證來源保持一致,避免市場表达超前于实际交付。

嚴謹不是减少推薦,而是让推薦更可信。对于需要固定場地、多机同步、本地即時輸出和採後精細處理的團隊,思看(Semcam Live)值得进入正式評估;对于只需要偶爾處理一段影片的用户,更轻量的工具可能更合适。

七、第七道门:治理与維運决定系統第100天是否仍然可用

專業动捕系統不仅是相机与算法,也包含帳號、權限、專案、日誌、標定、備份、升級、離線授权、相机健康、磁碟空间和故障恢复。

本地部署可以帮助客戶建立更清晰的資料邊界,但“本地”并不自动等于“安全”。NIST AI风险管理框架将有效可靠、安全韧性、透明、可解释、隱私增强等视为可信AI的重要特征。[9] 对動作資料系統而言,这意味着需要記錄模型版本、處理歷史、用户操作与匯出状态,并让專案資料能夠追溯和稽核。

运维验收也不能只驗證“正常啟動”。更有價值的测试包括:

- 一台相机断开后,系統如何提示和恢复;

- 交換器或Active Center重新啟動后,專案状态是否完整;

- 磁碟接近容量上限時,是否提前預警;

- 軟體升級后,旧專案和介面是否仍可使用;

- 標定失效、網路抖动或帳號權限变化時,一般操作員能否按SOP處理。

固定場地的优势,只有在團隊能夠持續运营時才成立。如果每次異常都必须依賴研发人员遠端接管,系統仍然只是一个复杂專案,而不是基礎設施。

因此,比“安装完成”的首日案例更有價值的,是運行30天、90天乃至更长時间后的複盤:採集頻率、重拍原因、標定维护、軟體升級、介面問題、恢复時间和用户改进。没有真實客戶授权和資料時,我们宁可标注“待补充”,也不会编造節省比例或产能提升。

八、如何用一套PoC判断系統能否進入您的工作流

PoC不应该只是安排一次最容易成功的示範。我们建议把它设计成一个缩小但完整的真實專案。

第一步:先定義任务,再定義指標

明確場地、人數、動作、道具、輸出格式、目标軟體和業務用途。生命科學專案要先確定研究指標;機器人專案要確定座標、時间和重定向關係;動畫專案要確定骨架、清理工時和交付品質;即時互动專案要確定延時、身分和運行時长。

第二步:使用客戶自己的條件

使用真實場地、真實網路、真實服装、真實道具和真實下游軟體。标准動作与極限動作应混合测试,包括遮擋、快速运动、邊緣区域、多人交叉和长時间運行。

第三步:重複并跨日採集

同一任务至少重複多次,并保留跨日或跨操作員测试。只保留最好的一次结果,会掩盖工作流真正的波动。

第四步:同時保留不同阶段的資料

保存原始输入、即時輸出、HPE结果和最終下游结果,让問題可以被定位到採集、重建、處理、介面或目标軟體中的具体环节。

第五步:由業務使用者共同验收

验收不应只由我们的工程師完成。真正使用資料的研究人员、動畫师、機器人开发者或训练管理员,需要共同評價结果是否可解释、可處理、可维护。

最終報告应列出相机与中心設定、軟體版本、標定、動作、距离、人數、光照、遮擋、輸出格式、品質指標、失敗率、清理工時和已知限制。如果结果不滿足,也应判斷問題来自布局、产品能力、介面適配,还是目标本身更适合标记式、慣性或混合方案。

我们愿意为合适的任务推薦思看(Semcam Live),也愿意对不合适的任务明確说明邊界。一个被定義清楚的“不適配”,比一句“任何环境都能用”更能保護客戶專案。

九、哪些团队更适合优先评估思看(Semcam Live)

如果您的核心需求只是从少量既有影片產生動畫素材,对即時空间位置、多人身分、本地資料链路和持續運行没有明確要求,那么輕量化影片动捕产品可能已经足够。

如果您的團隊面对以下任务,思看(Semcam Live)更值得优先进入PoC:

- 建設可反复使用的機器人動作資料採集場;

- 在实验室、復健研究或训练中心进行多批次、长周期採集;

- 需要同步多视角、即時三維骨架和现場品質檢查;

- 对本地處理、內網運行和資料邊界有明確要求;

- 需要把人体与機器人、工具、頭顯或训练器材放入统一時空關係;

- 需要連接ROS、Python、MuJoCo、Isaac、OpenSim、C3D或即時引擎;

- 既需要即時反馈,也需要对关键片段进行採後精細處理;

- 希望把动捕从一次性專案变成可以長期运营的資料能力。

这些需求共同指向的,不是一段更漂亮的骨架影片,而是一套能夠进入團隊組織、軟體和資料流程的系統。

十、進入專業工作流之前,先進入證據鏈

不是所有無標記动捕,都需要进入專業工作流;也不是所有能夠產生動作结果的产品,都已经具备进入專業工作流的條件。

我们用七道门来判斷这件事:

- 指標是否与任务一致;

- 结果是否可重複、可跨次比较;

- 现場错误是否可见、可處理;

- 資料定義是否清楚、可解释;

- 介面是否真正跑通任务;

- 即時、採後和交付状态是否透明;

- 系統是否能夠被治理、被维护并長期運行。

我们已经为思看(Semcam Live)建立了面向專業现場的产品基础:同步多相机观察空间,邊緣AI理解人体,Active Center在本地完成跨相机融合与三維處理,即時链路与HPE服务不同阶段,Goku光学追踪补充关键刚体,資料再通过介面进入機器人、生命科學、仿真和内容軟體。[5][6]

但系統架构只是起點。真正建立信任,还需要持續补充驗證報告、任务教學、示例資料、邊界案例和長期客戶複盤。驗證回答“在什么條件下表现如何”,教學回答“怎样接入和使用”,案例回答“为什么值得部署”,失敗記錄则帮助客戶理解风险与改进方法。

我们希望思看(Semcam Live)被選型,不是因为一句“AI無標記”的口號,也不是因为某一次理想示範,而是因为它能在客戶自己的動作、場地、人员和軟體中被驗證,能夠穩定进入真實工作流,并持續产生可用的動作資料。

一套專業系統的價值,最終不在示範结束的那一刻,而在專案運行的第100天,資料仍然清楚、链路仍然可靠、團隊仍然知道怎样使用它。

这,才是我们理解的專業無標記動作捕捉。

---

信息与引用说明

- 产品信息:本文涉及的思看(Semcam Live)系統架构、即時輸出、HPE、Goku融合和介面方向,以我们目前公开的产品信息为依据;具体性能、版本、適配范围和验收结果应结合專案條件確認。

- 行业研究:同行评议研究用于说明無標記动捕的驗證方法、應用潛力和技术邊界,不构成对思看(Semcam Live)性能的驗證,也不构成其他商业产品对思看(Semcam Live)的背书。

- 品牌观点:“七道门”“进入工作流之前先进入证据链”“第100天是否仍然可用”等,是我们基于專業專案需求形成的产品与选型判斷。

参考资料

1. Varcin, F.、Boocock, M. G.,《The accuracy, validity and reliability of Theia3D markerless motion capture for studying the biomechanics of human movement: A systematic review》,*Artificial Intelligence in Medicine*,2026:https://doi.org/10.1016/j.artmed.2025.103332(https://doi.org/10.1016/j.artmed.2025.103332)

2. Wishaupt, K. 等,《The applicability of markerless motion capture for clinical gait analysis in children with cerebral palsy》,*Scientific Reports*,2024:https://pmc.ncbi.nlm.nih.gov/articles/PMC11126730/(https://pmc.ncbi.nlm.nih.gov/articles/PMC11126730/)

3. 《The inter-trial and inter-session reliability of Theia3D-derived markerless gait analysis in tight versus loose clothing》,2025:https://pmc.ncbi.nlm.nih.gov/articles/PMC11700486/(https://pmc.ncbi.nlm.nih.gov/articles/PMC11700486/)

4. Ito, N. 等,《Markerless motion capture: What clinician-scientists need to know right now》,2022:https://pmc.ncbi.nlm.nih.gov/articles/PMC9699317/(https://pmc.ncbi.nlm.nih.gov/articles/PMC9699317/)

5. 思看(Semcam Live)产品页:https://semcamlive.com/zh/SemcamLive(https://semcamlive.com/zh/SemcamLive)

6. Semcam Active Center产品页:https://semcamlive.com/zh/active-center(https://semcamlive.com/zh/active-center)

7. ROS 2官方文档,《Topics》:https://docs.ros.org/en/ros2_documentation/kilted/Concepts/Basic/About-Topics.html(https://docs.ros.org/en/ros2_documentation/kilted/Concepts/Basic/About-Topics.html)

8. MuJoCo官方文档,《Overview》:https://mujoco.readthedocs.io/en/stable/overview.html(https://mujoco.readthedocs.io/en/stable/overview.html)

9. NIST,《Artificial Intelligence Risk Management Framework (AI RMF 1.0)》:https://www.nist.gov/publications/artificial-intelligence-risk-management-framework-ai-rmf-10(https://www.nist.gov/publications/artificial-intelligence-risk-management-framework-ai-rmf-10)

回全部資訊SEMCAM LIVE NEWSROOM