TrackStudio:一种面向无标记运动追踪的集成化工具包

《PLOS One》:TrackStudio: An integrated toolkit for markerless tracking

【字体: 大 中 小 】 时间:2026年09月24日 来源:PLOS One 2.8

编辑推荐:

  无标记运动追踪(markerless motion tracking)在过去十年中发展迅速,目前为行为学、临床和生物力学研究提供了强大的应用机遇。尽管若干专门化工具包在特定任务中表现出高性能,但使用现有工具仍需要扎实的技术专长。在为非专业人士在不同场景下提供足

  
无标记运动追踪(markerless motion tracking)在过去十年中发展迅速,目前为行为学、临床和生物力学研究提供了强大的应用机遇。尽管若干专门化工具包在特定任务中表现出高性能,但使用现有工具仍需要扎实的技术专长。在为非专业人士在不同场景下提供足够追踪性能的、易于获取的集成解决方案方面,仍存在空白。TrackStudio的开发旨在弥补这一空白,它将成熟的开放源代码工具整合为一条模块化、基于图形用户界面(GUI)的流水线,可开箱即用。该工具包提供视频录制预处理、录制同步、自动二维(2D)与三维(3D)姿态估计以及可视化功能,无需任何编程技能。研究人员提供了一份用户指南,包含视频采集、相机标定、视频同步和实验设置方面的实用建议,并记录了常见陷阱及其规避方法。为验证该工具包,研究人员在三种环境中测试了其性能,使用了低成本网络摄像头或高分辨率相机,涵盖了身体姿势、光照、空间和遮挡等方面的挑战性条件。在76名参与者中,平均帧间相关性超过0.98,平均三角测量误差保持在较低水平(手部追踪小于13.6毫米),证明了追踪的稳定性和一致性。研究人员进一步表明,同一流水线可扩展到手部追踪之外的其他身体部位和面部区域。TrackStudio为需要可靠性能但缺乏专业知识的科研人员和非专业人士提供了一条实用且易获取的无标记追踪途径。
**一、研究背景与问题**

运动追踪是运动控制和神经运动障碍研究领域的基础工具,对人体步态生物力学、运动协调机制以及帕金森病精细运动障碍的表征均具有关键意义。传统光学追踪系统依赖反光标记物,虽具有高精度优势,但受限于专用设备和受控环境,且存在成本高、标记物需保持可见与精确放置等固有限制。惯性测量单元(IMU)和磁追踪等替代方案虽降低了成本和标记物可见性要求,但其对环境干扰敏感、存在误差漂移且仍需专业操作知识,未能获得广泛应用。无标记追踪(markerless tracking, MLT)利用普通视频识别和追踪人体关键点,避免了标记物相关限制。现阶段基于计算机视觉和机器学习的二维姿态估计工具(如MediaPipe、OpenPose)及三维重建工具(如Anipose、Pose3D)已实现自动化处理,但现有工具链要求用户具备编程能力、可解决安装配置问题,并需适应不一致的软件标准,构成了非专业人员采用MLT的显著技术门槛。为填补这一空白,研究人员开发了TrackStudio工具包。

**二、研究内容与结论**

研究人员构建了TrackStudio这一集成工具包,将既有的开放源代码库(MediaPipe、Anipose等)整合为一个模块化、基于图形用户界面(GUI)的完整流水线,涵盖视频预处理、录制同步、2D/3D姿态估计与可视化功能,用户无需编写任何代码。为验证工具包性能,研究人员在三种不同环境中对76名参与者进行了测试:坐姿环境(45人,使用三台Logitech Brio网络摄像头,涉及日常物品操作及佩戴辅助装置条件下的追踪)、仰卧环境(26人,在模拟磁共振检查室内使用四台网络摄像头,低光照和局部身体位于扫描仪腔体内部条件下进行追踪)、混合环境(5人,使用五台高分辨率FLIR Blackfly S相机,在连续五天多时段内对手部、面部和手臂进行坐姿与站姿追踪)。评估指标包括帧间皮尔逊互相关、对数无纲量加速度变化率(log dimensionless jerk, LDJ)以及3D重投影误差。结果表明:三种环境下帧间相关性均超过0.98;手部追踪平均误差为4.41至13.6毫米,误差大于10毫米的帧占比低于0.6%;混合环境中目标接触命中率为91%(以指尖为中心5毫米半径球体与目标区域相交);仰卧位中设置间无显著误差差异(p=0.094)。此外,初步可用性评估中10名无软件使用经验的参与者均在首次尝试中成功完成全部操作流程。研究证实TrackStudio在不同条件下可提供稳定一致的追踪性能,为非专业人员使用MLT提供了实用路径。

**三、关键技术方法**

研究人员主要应用了以下技术方法:采用Google MediaPipe框架实现2D视频标注;采用Anipose方法进行相机标定、3D三角测量和视频标注;工具包以预配置的Python环境打包发布以避免依赖冲突;通过LED灯(混合环境每台相机一个)或记录计算机时间戳(坐姿环境)实现多相机同步;评估指标包括帧间皮尔逊互相关、对数无纲量加速度变化率(LDJ)和3D重投影误差;在混合环境中附加目标接触任务进行外部位置精度验证。样本队列来源:坐姿及混合环境数据获得剑桥心理学研究伦理委员会批准,仰卧环境数据获得伦敦大学学院研究伦理委员会(UCL REC)批准,所有参与者均签署书面知情同意书。

**四、研究结果**

**坐姿环境与仰卧环境性能。** 低成本的网络摄像头在这两种环境中均实现了高帧间相关性(坐姿:r=0.98±0.004;仰卧:r=0.999±0.0001)。LDJ值反映任务复杂度:仰卧环境简单动作(8.36±0.33)低于坐姿环境连续日常操作(10.55±0.36),符合既往研究中简单动作(7–10)与复杂动作(11–14)的参考范围。3D重投影误差保持低水平(坐姿:13.6毫米±10毫米;仰卧:8.95毫米±4.1毫米),且较大误差出现频率极低(坐姿:0.58%±0.17%;仰卧:0.55%±0.16%)。坐姿环境中佩戴辅助装置与未佩戴条件间误差无显著差异(p=0.37,BF10=0.23,ICC=0.67),仰卧环境中朝向/远离身体两类任务间误差亦无显著差异(p=0.094,BF10=0.636,ICC=0.95)。

**混合环境多部位追踪。** 使用高分辨率相机在连续五天对5名参与者进行手部、面部及手臂追踪,多因素方差分析未发现显著的天数效应或装置佩戴效应(0.93>p>0.15,0.33
**目标参照位置精度。** 在混合环境的目标接触任务中,730次触及目标过程中,以指尖为中心的5毫米半径球体与目标区域相交的比例为91%;对未成功接触的情况,指尖球体与目标边界之间的中位距离为10.3毫米(四分位距14.7毫米)。

**工作流可用性评估。** 10名无软件使用经验的参与者均首次成功完成安装到3D视频标注的完整流程,平均用户主动操作时间为04:44(范围02:09–09:33),不含计算机处理时间。

**五、讨论与结论**

讨论部分指出,TrackStudio的贡献不在于改进或替代既有姿态估计算法,而在于提供基于工作流的实用整合方案。通过预配置环境、图形界面和受限分析流程,它显著减少了用户在工具组装、软件环境管理、配置定义和数据处理方面的技术负担,使非技术用户能够获得与技术要求更高的实现方式相当的可重复结果。与ATHENA、DeepLabCut、Bonsai、OpenCap和FreeMoCap等现有工具相比,TrackStudio定位于一个不同的缺口:提供从视频准备到追踪可视化的预配置GUI路径,同时保持模块化以整合DeepLabCut等专业工具的输出。其性能验证在非理想条件下仍能保持稳定,目标参照位置精度与既往无标记手部追踪研究(指尖误差约11–21毫米)的结果大体相当。局限性方面,当前验证仅限于单人且相对结构化场景;多人场景中可能出现身份切换、人物间标记分配错误、人际遮挡等额外挑战,需另行测试和可能的身份追踪或人工校正。高度动态全身运动、严重不可预测遮挡及需要临床级运动学精度的应用场景可能仍需定制优化或基于标记物的系统。未来计划包括扩展至Linux和macOS操作系统、添加高级特征提取工具、扩展视频同步方法及加入多人追踪功能。

研究结论部分:通过提供一种预配置的、基于图形用户界面的系统,支持多种记录条件且无需定制工程,TrackStudio降低了无标记追踪(MLT)的采用门槛,使研究者能够专注于实验本身,而非受挫于系统搭建环节。在此过程中,它也为教育活动、预实验和探索性记录开辟了可能,这些场景中失败成本往往过高而难以投入时间。TrackStudio不是一个最优系统,而是一个实用系统:一种降低入门障碍并同时保持适应性的工具包。
相关新闻
生物通微信公众号
微信
新浪微博

热点排行

    今日动态 | 人才市场 | 新技术专栏 | 中国科学人 | 云展台 | BioHot | 云讲堂直播 | 会展中心 | 特价专栏 | 技术快讯 | 免费试用

    版权所有 生物通

    Copyright© eBiotrade.com, All Rights Reserved

    联系信箱:

    粤ICP备09063491号