PoseNet姿态追踪

机器学习ML5扩展功能中的PostNet功能可以实现17个人体姿态识别以及追踪位置,通过此功能可以进行一些姿态控制应用,且此功能不用连接网络,只需要一个摄像头即可实现。

姿势估计是指计算机视觉技术,用于检测图像和视频中的人类图形,以便确定某人的肘部出现在图像中的位置。需要说明的是,该技术无法识别图像中的人员,不存在与姿势检测相关的个人身份信息。该算法只是估计关键体关节的位置。—— 引用自Dan Oved

准备工作

  • 准备一个电脑
  • 准备一个摄像头,电脑自带或USB摄像头均可
  • 其他:不需要

加载插件

  • 实时模式,点击扩展功能模块,点击机器学习(ML5),返回:

  • 加载完成,机器学习(ML5)积木块出现,其中有PostNet姿态追踪

使用逻辑

  • 姿态识别是已经训练好的模型,因此无需训练的过程,直接开启识别即可

开始识别

  • 编写程序,点击绿旗执行循环检测

  • 识别结果如下,注意姿态追踪对电脑要求较高,此处可能会导致电脑变卡。

常见问题

问题 使用舞台显示摄像头画面的时候为什么不显示姿态识别的点位?
解决办法 为了不影响舞台显示效果,默认是关闭结果显示的,需要使用这个积木打开,舞台才会显示识别结果: