人工智能视频分析仪为人体动作检测树立新标准

Josiah02

如果安全摄像头不仅可以捕捉视频，还能了解正在发生的事情——实时区分日常活动和潜在危险行为，那会怎样？这就是弗吉尼亚大学工程与应用科学学院的研究人员正在塑造的未来，他们的最新突破是：一种人工智能驱动的智能视频分析仪，能够以前所未有的精度和智能检测视频片段中的人类动作。
该研究论文发表在《IEEE 模式分析与机器智能学报》杂志上。
该系统称为语义和运动感知时空变换网络 (SMAST)，有望带来广泛的社会效益，从增强监控系统和提高公共安全到实现医疗保健领域更先进的运动跟踪，以及改进自动驾驶汽车在复杂环境中的导航方式。
“这项人工智能技术为在一些最苛刻的环境中实现实时动作检测打开了大门，”电气与计算机工程系教授兼系主任、该项目首席研究员 Scott T. Acton 表示。“这种进步可以帮助预防事故、改善诊断甚至挽救生命。”
人工智能驱动的复杂视频分析创新
那么，它是如何工作的呢？SMAST 的核心是由人工智能驱动的。该系统依靠两个关键组件来检测和理解复杂的人类行为。第一个是多特征选择性注意模型，它可以帮助人工智能专注于场景中最重要的部分（例如人或物体），同时忽略不必要的细节。这使得系统能够更准确地识别正在发生的事情，例如识别某人投球而不是仅仅移动手臂。
第二个关键功能是运动感知 2D 位置编码算法，它可以帮助 AI 跟踪物体随时间的运动情况。想象一下，观看一段人们不断变换位置的视频时，此工具可以帮助 AI 记住这些动作并了解它们之间的关系。通过集成这些功能，SMAST 可以实时准确识别复杂动作，使其在监控、医疗诊断或自动驾驶等高风险场景中更加有效。
SMAST 重新定义了机器检测和解释人类行为的方式。当前的系统难以处理混乱、未经编辑的连续视频片段，通常会遗漏事件背景。但 SMAST 的创新设计使其能够以惊人的精度捕捉人与物体之间的动态关系，而这得益于使其能够从数据中学习和适应的 AI 组件。
树立动作检测技术的新标准
这项技术飞跃意味着人工智能系统可以识别跑步者过马路、医生执行精确手术甚至拥挤空间中的安全威胁等动作。SMAST 已经在 AVA、UCF101-24 和 EPIC-Kitchens 等关键学术基准中超越了顶级解决方案，为准确性和效率树立了新标准。
“这项技术对社会的影响可能是巨大的，”参与该项目的 Acton 实验室博士后研究员 Matthew Korban 说道。“我们很高兴看到这项人工智能技术将如何改变行业，使基于视频的系统更加智能，能够实时理解。”