人体姿态估计MPII数据集详解

最新推荐文章于 2025-05-05 08:32:50 发布

@正在学习驰骋的小马

最新推荐文章于 2025-05-05 08:32:50 发布

阅读量2.8k

点赞数 4

CC 4.0 BY-SA版权

文章标签：计算机视觉图像处理

本文链接：https://blog.csdn.net/qq_43646281/article/details/134158593

本文详细介绍了MPII人体姿势数据集的结构，包括annolist中的标注信息，如图片名、关节位置、活动类别和视频来源。特别关注了.mat格式文件的六个组成部分及其作用。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

数据集总览

在这里插入图片描述

数据集下载连接

链接: 官网下载.

数据集介绍

MPII人体姿势数据集是用于评估关节人体姿势估计的最先进的基准。该数据集包括大约25K张图像，其中包含超过40K个带有注释的身体关节的人。这些图像是使用建立的每天人类活动的分类法系统地收集的。总体而言，该数据集涵盖410个人类活动，并且每个图像都提供了一个活动标签。每一张图片都是从YouTube视频中提取的，并提供了前后未加注释的帧。此外，对于测试集，我们获得了更丰富的注释，包括身体部分闭塞和3D躯干和头部方向。
在这里插入图片描述官网中对数据集的标注的最后生成形式是用MATLAB打开的.mat格式·
后续因为实验需要，也有专家和学者将MPII数据集整合成了json形式以及h5格式。

本文主要将对.mat形式的MPII数据集做一个详解

在这里插入图片描述
用MATLAB打开标注文件后，发现本文件由六部分解释，在MPII官方网站也对这六部分做出了介绍

注：idx是英文index的缩写表示索引的意思     类似于数组的下标

1.annolist: 大小：24987 里面共涵盖了可以用作姿态估计的24987张图片的标注信息，这里先做粗略介绍，下文将重点介绍这个结构，以及所包含的信息
2.img_train(imgidx):0/1分别表示测试集/训练集
3.version：是数据集的版本号
4.single_person：如果图片中有1个分离的人，会给出1个标注人的矩形框，这里存放的是标注框的索引，如果存在两个人会给出数组大小是二的结构，并存放其索引；如下图所示
在这里插入图片描述
可以清晰的看到索引5的照片对应有两个矩形框应该有两个分离的人。
在annolist中有关于图片名字的一列(下文将详细解释annolist中的各个字段)

import cv2
image=cv2.imread("D:\\015601864.jpg")
cv2.imshow('origin',image)
cv2.waitKey(0)

在这里插入图片描述
图中心处有两个分离的冰壶运动员
5.act:图片对应的活动种类和具体动作

注第一列给出的是活动种类第二列是具体活动 后面是相对应的id可以与官网给出的下图一一对应

在这里插入图片描述
6.video_list:指定YouTube提供的视频ID。要在YouTube上观看视频，请访问https://www.youtube.com/watch?v=video_list(videoidx) 具体内容如下：

对annolist中的标注信息做一个详解以015601864.jpg为例

在这里插入图片描述

1.image：打开后是对应图片的名字

2.annorect：

由六部分组成
(x1,y1)表示head的左上坐标（x2.y2）是head的右下坐标根据这两个坐标可以获得一个head框
我用python对其相关像素做了改变效果如下

annopoints：
在这里插入图片描述
包括16个身体关节的标注
0-右踝
1-右膝
2-右臀
3-左髋关节
4-左膝
5-左踝
6-骨盆
7-胸
8-上颈
9-头顶
10-右腕
11-右肘
12-右肩
13-左肩
14-左肘
15-左腕
标注后效果如下（这里为了方便观看，我将每个像素点放大了4倍 11放大到44）：
在这里插入图片描述
scale和objpos：原作者表示scale=人体框高度/200 以objpos为粗略的人体中心点可以做出一个正方形的大致人体框，在我的计算和实验下仍不能准确的框出人体，若有小伙伴对这个有相关的了解可以私信探讨一下，我对这两个信息处理并使用后得到的效果如下。
在这里插入图片描述
这里的人体框会露出脚的部分。
3.frame_sec
4.vididx
第三部分是当前图片在视频的那一秒出现
第四部分是当前图片在哪个视频出现
第三和第四以及video_list综合使用可以找到这张图片的出处。
以上是我对这个数据集做出的详细解释，若出现错误请及时留言指正