Animal-in-Motion 是一个先进的 AI for Science 数据收集与处理流水线,专为动物视频数据的全面分析而设计。该工具建立在动物姿态预测的核心功能之上,提供包括掩码、关键点、深度信息和遮挡数据在内的丰富标注。这些详细的输出使其特别适用于 3D/4D 重建、精确的动物追踪以及跨多个生物学研究领域的稳健姿态预测等高级应用。
该工具在多个科学领域中都有关键应用,使研究人员能够以前所未有的准确性和效率解决复杂问题。在神经科学和行为生物学中,Animal-in-Motion 可用于从视频记录中提取精确的运动学动作、眼动追踪和姿态估计,然后将这些数据与神经数据进行时间对齐。这使得对行为的细胞基础进行详细分析成为可能,例如,在需要精确行为监测同时确保动物福利的研究中设计符合伦理的实验改进方案,比如在鸣声学习研究中,协调听觉隔离的科学要求与群居饲养的伦理需求。
在生态学和环境生物学中,该流水线有助于量化对于理解新陈代谢过程至关重要的活动模式。研究人员可以利用它,通过分析详细的运动和姿势变化来测量体温调节成本或能量消耗,从而提高异速尺度和新陈代谢理论模型的准确性。对于生物力学和法医生物力学,Animal-in-Motion 为相机标定和运动追踪提供强大的功能,促进精确的 2D 和 3D 重建,以便深入分析动物运动或损伤模式。此外,Animal-in-Motion 生成的丰富标注数据集是开发和验证姿态估计领域的深度学习模型的宝贵资源,允许推导出执行肢体长度和运动学先验的多峰值非极大值抑制 (NMS) 算法,以获得更具生物学合理性的结果。
实际应用包括药物发现或遗传学研究中的自动化高通量表型分析、实验室或自然环境中动物福利的无创监测,以及为行为学研究对复杂动物行为进行的详细量化。其自主处理和标注大量视频数据的能力,显著加快了需要精细行为分析领域的研究发现步伐。
工具构建参数
| 主要语言 | Python |
| 许可证 | Apache-2.0 |

