1、 ICS 03.080 A 16 DB21 辽宁省地方标准 DB21/T 3469 2021 适合教室内姿态估计的标注规范 2021 - 07 - 30 发布 2021 - 08 - 30 实施 辽宁省市场监督管理局 发布 DB21/T 34692021 I 目 次 前 言 .I 1 范围 .2 2 规范性引用文件 .2 3 术语和定义 .2 4 教室内人体标注 要求 .3 4.1 通则 .3 4.2 人体轮廓标注 要求 .3 4.3 人体关键点标注 要求 .7 5 教室内物体标注 要求 .26 5.1 通则 .26 5.2 桌面轮廓标注 要求 .26 附录 A(资料性)标注示例 .31 A.
2、1 人体轮廓标注示例 .31 A.2 人体关键点标注示例 .33 A.3 手部和头部标注示例 .34 A.4 桌面标注示例 .35 A.5 门窗标注示例 .36 参考文献 .37 DB21/T 34692021 I 前 言 本 文件 按照 GB/T 1.1 2020 给出的规则起草。 请注意本文 件 的某些内容可能涉及专利。本文件的发布机构不承担识别这些专利的责任。 本 文件 由 辽宁 省工业和信息化厅提出 本 文件 由 辽宁 省工业和信息化厅归口 本 文件 起草单位:沈阳航空航天大学、 沈阳图为科技有限公司、 辽宁省高中等教育招生考试委员会 办公室、辽宁邮电规划设计院有限公司、沈阳工程学院、
3、辽宁大学、 辽宁奥普泰通信股份有限公司、 电 子信息技术标准化技术委员会(辽宁) 本 文件 主要起草人:石祥滨、刘芳、代钦、刘翠微、张德园、毕静、武卫东、王佳、代海龙、杨啸 宇、马技、 任颋、李丹、刘枝峰、王建华、袁治君、李倩、 王广奇 、陈海涛 、 张浩、 韩冬、刘健、孟武 生、汪洪江 本 文件发布实施后,任何单位和个人如有问题和意见建议,均可以通过来电和来函等方式进行反馈, 我们将及时答复并认真处理,根据实际情 况依法进行评估及复审。 归口管理部门通信地址:沈阳市皇姑区北陵大街 45-2号。 归口管理部门联系电话: 024-86913384。 标准起草单位通讯地址:辽宁 省沈阳市道义南大街
4、 37号沈阳航空航天大学 。 标准起草单位联系电话: 13940190938。 DB21/T 34692021 2 适合教室内姿态估计的标注规范 1 范围 本文件 规定了教室环境中人体 以及桌面、门窗等 物体的 视频图像 标注 要求 。 本文件 适用于 采用计算机技术自动识别 教室 内 人体 、 物体 和人体姿态等应用。 2 规范性引用文件 本文件没有规范性引用文件。 3 术语和定义 下列术语和定义适用于本文件。 3.1 不可预测 unpredictable 需要标注的目标处于摄像头非背立面且被遮挡,无法估计出该目标的具体位置;或需要标注的目标 处于摄像头背立面。 3.2 关键点 keypoi
5、nt 影响人体姿态的各个关节点称为人体关键点。 3.3 互遮挡 inter-occluded 需要标注的同一类物体之间的遮挡关系称为互遮挡。 3.4 可见 visible 需要标注的目标处于摄像头非背立面且无遮挡称为可见 。 3.5 可预测 predictable 需要标注的目标处于摄像头非背立面且被遮挡,但是可以通过参照点或者其他部位估计出其位置。 3.6 轮廓 silhouette 指构成人体或者物体外缘的线条称为轮廓 。 3.7 人体姿态估计 human pose estimation 根据输入图像或视频计算其中人体各个部位的状态, 部位状态通常由人体关节点的位置坐标和置信 度表示 。
6、3.8 DB21/T 3469 2021 3 摄像头背立面 back elevation of camera 以教室中摄像头的位置和人体坐姿为参照,二维图像中人体和物体不可见的一面为摄像头背立面。 3.9 摄像头非背立面 non-back elevation of camera 以教室中摄像头的位置和人体坐姿为参照,二维图像中人体和物体可见的一面为摄像头非背立面。 3.10 它遮挡 other occluded 其它类物体遮挡了需要标注的目标 称为它遮挡 。 3.11 无遮挡 unoccluded 需要标注的人体部位或者物体未被其他人体或物体遮挡。 4 教室内人体标注 要求 4.1 通则 教室
7、内人体 标注应标出图像中对分析人体行为具有关键意义的信息,包括人体轮廓、人体关键点和 手部、头部。 4.2 人体轮廓标注 要求 4.2.1 基本要求 人体轮廓的标注样式:从可见人体的边缘上选取若干采样点, 采样点尽量包括所有拐点, 连接相邻 采样点拟合人体轮廓,最后首尾相连构成闭环,并记录采样点坐标序列。 标注人体轮廓时要保证轮廓的 内部为要标注的人体; 若待标注对象处于图像边缘,应尽量靠近图像内部标注,不应标注在图像边缘处 或外部。 人体轮廓 标注 应 找出人体的最大连通部分,标注后的人体轮廓曲线 应 构成一个闭环,且不可交叉。 根据 被拍摄目标的遮挡关系, 本文 件 分别从无遮挡、互遮挡和
8、它遮挡三种情况给出人体轮廓的标注 样式 4.2.2 人体轮廓无遮挡标注 无遮挡表示没有 人或 物体遮挡需要标注的人体目标,图像中人体目标基本可见。按轮廓标注样式对 人体轮廓进行标注即可。标注样式如图 1和图 2所示 。 DB21/T 34692021 4 a) 标注前 b) 标注后 图 2 无遮挡人体轮廓标注( 2) 4.2.3 人体轮廓互遮挡标注 互遮挡是指由于 多 个人体目标在图像中部分重叠,导致待标注的人体目标部分不可见,这种情况下 只需对可见的人体部分进行标注。特别规定:标注时 应 将衣服包含在人体轮廓线内; 应 将凸出的头发或 饰品排除在轮廓外,保持头部轮廓尽量平滑并将其拟合成圆弧形
9、。标注样式如图 3、图 4和 5所示。 a) 标注前 b) 标注后 图 1 无遮挡人体轮廓标注( 1) DB21/T 3469 2021 5 a)标注前 b)标注后 图 4 互遮挡人体轮廓标注( 2) 4.2.4 人体轮廓它遮挡标注 a) 标注前 b) 标注后 图 3 互遮挡人体轮廓标注( 1) a) 标注前 b) 标注后 图 5 互遮挡人体轮廓标注( 3) DB21/T 34692021 6 a)标注前 b)标注后 图 7 它遮挡人体轮廓标注( 2) 它遮挡是指桌子、试卷或者其他物体遮挡了待标注的人体目标。当人体图像被遮挡的面积较大,无 法通过人体结构特征推测被遮挡人体部位的位置时, 应 只
10、需标注可见的人体部分,标注样式如图 6-7所 示 。 当遮挡物比较细小不影响人体的可见性时, 应 将其忽略 。 标注样式如图 8、图 9所示,图中的窗框和 桌腿遮挡了待标注人体目标的胳膊和腿,但是可以通过人体连通性完整的标注出这些部位的轮廓。标注 时人手中的纸、包等物品不属于人体轮廓,标注样式如图 10所示,图中考生手中的纸张在标注时 应 被排 除在人体轮廓之外。 a) 标注前 b) 标注后 图 6 它遮挡人体轮廓标注( 1) a) 标注前 b) 标注后 图 8 它遮挡人体轮廓标注( 3) DB21/T 3469 2021 7 4.3 人体关键点标注 要求 4.3.1 基本要求 关键点是人体图
11、像中比较明显的标记点或关节点。标注过程中 应明确 人 体 的各个关键点的位置 和 该 点的可见度 。 关键点 (x, y)为图像中的二维坐标 ,可见度 v0,1,2 。 其中,可见度 v=0 表示这个关 键点不可见且不可预测,无法标注,此时 x=y=0; 可见度 v=1 表示这个关键点不可见,但是可以通过预 测标注, (x, y)取关键点的预测坐标值; 可见度 v=2 表示该关键点可见可标注, (x, y)取关键点的实际 坐标值。 本文件 共设置了 17个需标注的关键点,并约定了其在图像中标注的颜色,如 表 1所示: a) 标注前 b) 标注后 图 9 它遮挡人体轮廓标注( 4) a) 标注前
12、 b) 标注后 图 10 它遮挡人体轮廓标注( 5) DB21/T 34692021 8 表 1 人体关键点及标注样式表 特别说明,下列情况无需标注: a) 关键点不在人体轮廓内; b) 鼻子、眼睛和耳朵关键点处于摄像头背立面; c) 鼻子、眼睛、耳朵、肩部、肘部、腕部、髋部、膝部和踝部关键点不可预测。 眼睛关键点和耳朵关键点的标注方式一致,将其统称为头部。 关键点的标注以目标人体正面朝向为正方向,即根据人体实际的左右方向标注人体的左右躯体。人 物所穿着贴身衣服为身体一部分,人体关键点标注模型如图 11 和图 12所示。 序号 关键点 颜 色 可 见 可预测 关键点象素值 R G B 1 鼻子
13、 nose 红 色 255 0 0 2 左眼 left-eye 绿 色 0 255 0 3 右眼 right-eye 海绿色 46 139 87 4 左耳 left-ear 天 蓝 135 206 235 5 右耳 right-ear 蓝 色 0 0 255 6 左肩 left-shoulder 黄 色 255 255 0 7 右肩 right-shoulder 橙 色 255 97 0 8 左肘 left-elbow 淡紫色 218 112 214 9 右肘 left-elbow 湖紫色 153 51 250 10 左腕 left-wrist 粉 红 255 192 203 11 右腕 ri
14、ght-wrist 栗 色 176 48 96 12 左髋 left-hip 沙棕色 244 164 96 13 右髋 right-hip 巧克力 210 105 30 14 左膝 left-knee 青 色 0 255 255 15 右膝 right-knee 品 蓝 65 105 225 16 左踝 left-ankle 金 色 255 215 0 17 右踝 right-ankle 暗金橘色 184 134 11 DB21/T 3469 2021 9 4.3.2 鼻子关键点 4.3.2.1 基本要求 标注位置 应 为鼻子的几何中心点。 4.3.2.2 鼻子关键点可见 a)标注点名称 b)
15、标注点位置 图 11 人体关键点示意图 图 12 教室中真人标注 DB21/T 34692021 10 鼻子部位完全可见或部分可见时,关键点可见, 可见度 值 应 为 2。 完全 可见的标注样式如图 13和 14 所示;部分可见的标注样式如图 15所示,图中鼻子被口罩部分遮挡但基本可见,标注时可以根据口罩和 鼻子的位置,推测出关键点的位置。 a) 标注前 b) 标注后 图 13 鼻子关键点可见标注( 1) a) 标注前 b) 标注后 图 14 鼻子关键点可见标注( 2) a) 标注前 b) 标注后 图 15 鼻子关键点可见标注( 3) DB21/T 3469 2021 11 4.3.2.3 鼻
16、子关键点可预测 鼻子关键点可预测是指鼻子在图 像中不是明显可见但可预测出其位置,关键点的 可见度 值为 1。 本 文件 按以下三种情况对鼻子关键点的位置进行预测: a) 人体面部可见但鼻子部位完全被遮挡,此时将关键点标注在遮挡物的适当位置上,标注样式如 图 16所示 ; b) 人体面部部分可见,此时将关键点标注在面部中心偏下位置,标注样式如图 17 所示 ; c) 人体面部完全不可见,此时需推测面部平面位置并根据头部朝向确定鼻子关键点的位置,标注 样式如图 18 所示。图中人物脸部被完全遮挡,标注时首先根据坐姿推测出脸部平面的位置,再通过脖 子与头部中心的位置推测头部的转向情况 ,完成关键点的
17、标注。 a) 标注前 b) 标注后 图 16 鼻子关键点可预测标注( 1) a) 标注前 b) 标注后 图 17 鼻子关键点可预测标注( 2) a) 标注前 b) 标注后 图 18 鼻子关键点可预测标注( 3) DB21/T 34692021 12 图 19 鼻子关键点无法预测标注 4.3.2.4 鼻子关键点不可预测 鼻子位置不可预测时关键点无需标注,关键点的 可见度 值为 0。鼻子关键点不可预测分为以下三种 情况: a) 由于摄像头像素过低导致无法看清楚人脸的转向情况,无法预测关键点的位置,标注样式如图 19所示; b) 人体被遮挡导致鼻子不在所标注的轮廓线内,关键点无需预测,标注样式如图
18、20所示; c) 鼻子处于摄像头背立面,关键点不可预测,标注样式如图 21所示。 图 20 鼻子关键点不在轮廓线内标注 DB21/T 3469 2021 13 图 21 鼻子关键点处于摄像头背立面标注 4.3.3 头部关键点 4.3.3.1 基本要求 头部主要包括左眼、右眼、左耳和右耳 4个关键点,标注位置为各个部位的几何中心点,眼睛关键 点的位置为眼球中心,耳朵关键点的位置为耳洞中心。人体处于摄像头非背立面的情况下,对以上关键 点进行标注。 4.3.3.2 头部关键点可见 眼睛和耳朵完全可见或部分可见情况下,可依次标出可见关键点,关键点的 可见度值为 2。图 22 中的男生左右眼和左右耳清晰
19、可见,可直接标注;图 23 中男生左右眼眉可见,左右眼关键 点标在眼眉 下边缘的眼球上,左右耳关键点标注在耳朵轮廓中心点位置。 4.3.3.3 头部关键点可预测 头部关键点可预测是指当关键点在图像中处于摄像头非背立面且被其他物体完全遮挡,或由于像素 a) 标注前 b) 标注后 图 22 头部关键点可见标注( 1) a) 标注前 b) 标注后 图 23 头部关键点可见标注( 2) DB21/T 34692021 14 过低导致关键点无法从图像中清晰看到时,可以根据其他部位或者参照物(如眼镜、口罩等)估计出该 关键 点的位置。图 24、图 25 中,人物佩戴了眼镜,可将眼镜作为参照物推测出眼睛关键
20、点位置;图 26 中无参照物,可以通过相邻部位推测出耳朵关键点的位置。 4.3.3.4 头部关键点不可预测 头部关键点不可预测可以分为四种情况: a) 标注前 b) 标注后 图 24 头部关键点可预测标注( 1) a) 标注前 b) 标注后 图 25 头部关键点可预测标注( 2) a) 标注前 b) 标注后 图 26 头部关键点可预测标注( 3) DB21/T 3469 2021 15 a) 由于摄像头像素过低无法看清楚人脸的转向情况,导致关键点位置无法预测; b) 人体被遮挡导致关键点不可预测; c) 关键点不在所标注的轮廓线内; d) 关键点处于摄像头背立面。 以上情况 头部 关键点无需标
21、注,关键点的 可见度 值为 0,标注样式如图 27、图 28、图 29和图 30所示。 4.3.4 肩部关键点 4.3.4.1 基本要求 肩部包括左肩和右肩两个关键点,关键点标注位置为肩关节中心点。 本文件 分别从可见、可预测和 不可预测三种情况给出标注样式。由于需要通过肩部关键点确定人体整体位置,因此当肩部关键点不可 见时应尽可能对其位置进行预测。 4.3.4.2 肩部关键点可见 肩部在图像中 清晰可见 时 ,直接标注即可,关键点 可见度 值为 2。肩部可见标注样式如图 31所示。 图 27 头部关键点不可预测标注( 1) 图 28 头部关键点不可预测标注( 2) 3.27 2 图 30 头
22、部关键点不可预测标注( 4) 图 29 头部关键点不可预测标注( 3) DB21/T 34692021 16 4.3.4.3 肩部关键点可预测 肩部关键点可预测 是指 由于摄像头的角度不同,有些情况下只能见到一侧肩部,而需要对另一侧肩 部进行预测,预测获得关键点 可见度值为 1。标注样式如图 32、图 33所示。图中只能看到左(右)肩 的关键点,可以按如下方法进行预测:如果右(左)肘可见,首先找到右(左)肘的位置, 根据右(左) 肘位置沿着上臂向上 绘制一条 直 线,然后在左(右)肩部与脖子中心绘制一条直线(特别提示:可以通 过人体坐姿绘制此条线,若为 正坐姿则此连接线应与桌子的边线平行,若坐
23、姿不正可根据身体转向进行 方向调整),两条线的相交点即为预测的右(左)肩部的关键点。 a) 标注前 b) 标注后 图 31 肩部关键点可见标注 a) 标注前 b) 标注后 图 32 肩部关键点可预测标注( 1) a) 标注前 b) 标注后 图 33 肩部关键点可预测标注( 2) DB21/T 3469 2021 17 4.3.4.4 肩部关键点不可预测 肩部关键点不可预测是指由于摄像头的角度等原因,肩部被其他物体完全遮挡无法推测位置,或无 法找到两条符合上一节要求的直线,这两种情况下关键点的 可见度 值为 0。肩部不可预测标注样式如图 34、图 35所示。 4.3.5 肘部关键点 4.3.5.
24、1 基本要求 肘部包括左肘和右肘两个关键点,关键点标注位置为肘部中心点。下面分别从可见、可预测和不可 预测三种情况给出标注样式。 4.3.5.2 肘部关键点可见 肘部在图像中完全可见时可直接在关节中心点标注,关键点的 可见度 值为 2。肘部关节都可见的标 注样式如图 36-37所示。 a) 标注前 b) 标注后 图 34 肩部关键点不可预测标注( 1) a) 标注前 b) 标注后 图 35 肩部关键点不可预测标注( 2) DB21/T 34692021 18 a) 标注前 b) 标注后 图 38 肘部关键点可预测标注( 1) 4.3.5.3 肘部关键点可预测 肘部关键点可预测是指 肘部 被完全
25、遮挡, 但是 可通过相邻部位推测其位置,关键点的 可见度 值为 1。 图 38中人物的右肘不可见,但可以根据右臂的方向和位置进行推测。图 39中 , 右肘被左手遮挡 , 可根 据人体结构推测出其位置;左肘被外套遮 挡 ,可根据左手臂的方向和位置 推 测出左肘 关键点 的位置。 a) 标注前 b) 标注后 图 36 肘部关键点可见标注( 1) a) 标注前 b) 标注后 图 37 肘部关键点可见标注( 2) DB21/T 3469 2021 19 a) 标注前 b) 标注后 图 39 肘部关键点可预测注( 2) a) 标注前 b) 标注后 图 40 腕部关键点可见标注 4.3.5.4 肘部关键点
26、不可预测 肘部关键点不可预测是指肘部完全被遮挡 且 无法推测出具体位置,这种情况关键点的 可见度 值为 0。 4.3.6 腕部关键点 4.3.6.1 基本要求 腕部包括左腕和右腕两个关键点,关键点标注位置为腕部中心点。 4.3.6.2 腕部关键点可见 当腕部在图像中完全可见时可直接进行标注, 也可以 通过手部推测出手腕的位置, 可见度 值为 2。 特别规定:手表对手腕的遮挡可以忽略,此时关键点 的状态 为可见。腕部可见标注样式如图 40 所示。 DB21/T 34692021 20 a) 标注前 b) 标注后 图 41 腕部关键点可预测标注 4.3.6.3 腕部关键点可预测 腕部关键点可预测是
27、指腕部在被完全遮挡的情况下,可以根据其他部位推测出该部位的位置,关键 点的 可见度 值为 1。腕部可预测标注样式如图 41 所示,图中右腕的位置可根据右手及右肘的位置进行 推测。 4.3.6.4 腕部关键点不可预测 腕部关键点不可预测是指腕部完全被遮挡且无法推测其位置,关键点的 可见度 值为 0。 4.3.7 髋部关键点 4.3.7.1 基本要求 髋部包括左髋和右髋两个关键点,关键点标注位置为髋部中心点 ,即躯干和大腿部位分界线的中心 点 。下面分别从可见、可预测和不可预测三种情况给出标注样式。 4.3.7.2 髋部关键点可见 髋部关键点可见是指髋部在图像中可见,在部位分界线中心点进行标注即可
28、,关键点的 可见度 值为 2,标注样式如图 42、图 43 所示。 DB21/T 3469 2021 21 4.3.7.3 髋部关键点可预测 髋部关键点可预测是指髋部完全被遮挡或无法看清身体部位明显分界线,可以通过其他可见的身体 部位推测出髋部关键点的位置,关键点的 可见度 值为 1,标注样式如图 44 所示,图中左髋部被左臂遮 挡,可以通过可见的右髋位置以及腹部方位来推测关键点的位置。图 45 中未见明显分界线 ,可以 通过 其他可见的身体部位推测出髋部关键点的位置。 a) 标注前 b) 标注后 图 43 髋部关键点可见标注( 2) a) 标注前 b) 标注后 图 42 髋部关键点可见标注(
29、 1) DB21/T 34692021 22 a) 标注前 b) 标注后 图 44 髋部关键点可预测标注( 1) 图 3.38 髋部可预测标注样式 a) 标注前 b) 标注后 图 45 髋部关键点可预测标注( 2) 4.3.7.4 髋部关键点不可预测 髋部关键点不可预测是指髋部完全被遮挡且无法推测出具体位置,关键点的 可见度 值为 0。 4.3.8 膝部关键点 4.3.8.1 基本要求 膝部关键点包括左膝和右膝两个关键点,关键点标注位置为膝部中心点 ,即大小腿分界线中心点 。 下面分别从可见、可预测和不可预测三种情况给出标注样式。 4.3.8.2 膝部关键点可见 膝部关键点可见是指膝部在图像中
30、完全可见,在部位分界线中心点进行标注即可,关键点的 可见度 值为 2。标注样式如图 46所示。 DB21/T 3469 2021 23 a) 标注前 b) 标注后 图 46 膝部关键点可见标注 a) 标注前 b) 标注后 图 47 膝部关键点可预测标注 4.3.8.3 膝部关键点可预测 膝部关键点可预测是指关键点 被完全遮挡或身体部位分界线不是清晰可见 , 但 可通过其他可见的身 体部位推测出其位置, 关键点的 可见度 值为 1。标注样式如图 47所示,图中膝部不可见,膝部以下的部 位可见,则可以根据小腿的位置推测出膝关节所在的位置。 4.3.8.4 膝部关键点不可预测 膝部关键点不可预测是指
31、膝部完全被遮挡且无法推测出具体位置,关键点的 可见度 值为 0。 4.3.9 踝部关键点 4.3.9.1 基本要求 踝部关键点包括左踝和右踝两个关键点,关键点标注位置为踝部中心点 ,即小腿和脚部分界线的中 心点 。下面分别从可见、可预测和不可预测三种情况给出标注样式。 DB21/T 34692021 24 a) 标注前 b) 标注后 图 48 踝部关键点可见标注( 1) 4.3.9.2 踝部关键点可见 踝部关键点可见是指踝部在图像中完全可见,在部位分界线中心点进行标注即可,关键点的 可见度 值为 2,标注样式如图 48、图 49 所示。 4.3.9.3 踝部关键点可预测 踝关节可预测是指关键点
32、被遮挡或身体部位分界线不是清晰可见,可根据腿部或脚部的位置和方向 预测出踝关节的位置,关键点的 可见度 值为 1。标注样式如图 50 所示,图中踝部关键点不可见,但可 通过腿部与脚部位置推测出关键点所在位置。 a) 标注前 b) 标注后 图 49 踝部关键点可见标注( 2) DB21/T 3469 2021 25 a) 标注前 b) 标注后 图 50 踝部关键点可预测标注 4.3.9.4 踝部关键点不可预测 踝部关键点不可预测是指踝部完全被遮挡且无法推测出具体位置,这种情况下关键点的 可见度 值为 0。 4.4 手部头部标注 要求 4.4.1 基本要求 为了更精确的识别动作, 应 标注出人体的
33、左手、右手和头部,采用外接矩形的形式进行标注,外接 矩形 分别 将左手、右手和头部完全框住。下面分别从部位无遮挡、有遮挡可标注和有遮挡不可标注三种 情况给出标注样式。三个部位的标注样式设置如下: 头部:红色外接矩形; 左手:绿色外接矩形; 右手:蓝色外接矩形。 4.4.2 手部头部无遮挡 标注 当待标注 部位在图像中可见时,直接采用相应的外接矩形进行标注即可,标注样式如图 51所示。 4.4.3 手部头部有遮挡可标注 图 51 手部头部无遮挡标注 DB21/T 34692021 26 图 52 手部头部有遮挡可标注 由于摄像头拍摄角度等原因,人体的头部或手部可能被其他人体部位或物体遮挡,此时可
34、根据可见 的头部或手部推测被遮挡的部位,也可通过其他相邻部位的信息推测出待标注部位的位置。标注样式如 图 52所示,图中 左 手不可见 , 但 可 根据可见的部位信息推测 其位置 。 4.4.4 手部头部有遮挡不可标注 由于摄像头拍摄角度等原因,人体的头部或手部可能被其他人体部位或物体遮挡,如果无法根据可 见的头部或手部推测出不可见部位的位置,也不能通过相邻部位信息推测出待标注部位的位置,则不进 行标注,标注样式如图 53所示,图中头部和右手可见,左手在桌面以下无需标注。 5 教室内物体标注 要求 5.1 通则 需要标注的教室内物体包括:桌面、门和窗户,标注形式为物体的外围轮廓,轮廓的采样点数
35、不少 于 4个,且只能有一个闭合区域。 5.2 桌面轮廓标注 要求 5.2.1 基本要求 图 53 手部头部有遮挡不可标注 DB21/T 3469 2021 27 为了获得桌面的范围和位置,需要标注的桌面包括考生的桌面及教室前面的讲台桌面,两种轮廓标 注 要求 相同。标注桌面轮廓时, 应 只标注桌面的最大可见连通部分,并且标注后的轮廓只能有一个闭合 区域。按遮挡关系可分为无遮挡标注和它遮挡标注两种情况。 5.2.2 桌面无遮挡标注 无遮挡表示要标注的桌面未被明显遮挡或部分遮挡但可预测,标注样例如图 54、图 55和图 56所示。 图 54中桌面四角清晰可见,可直接标注;图 55中桌面四角清晰可
36、见,桌面中间放有物体,但未阻断连接 四个桌角的平行四边形闭环,可直接标注;图 56中仅有一个桌角被部分遮挡但可预测出 该桌角的位置, 可直接标注。 a) 标注前 b) 标注后 图 54 桌面无遮挡标注( 1) a) 标注前 b) 标注后 图 55 桌面无遮挡标注( 2) a) 标注前 b) 标注后 图 56 桌面无遮挡标注( 3) DB21/T 34692021 28 5.2.3 桌面它遮挡标注 它遮挡是指桌面被其他人或物体遮挡(试卷除外),当遮挡面积较大时,标注桌面的可见部分即可。 若桌子被其他人或物体遮挡分成多个可见部分则标注面积最大的可见连通 部分 。考生的桌面被其他它物 体遮挡的标注样
37、式如图 57-59所示。 a) 标注前 b) 标注后 图 57 桌面它遮挡标注( 1) a) 标注前 b) 标注后 图 58 桌面它遮挡标注( 2) a) 标注前 b) 标注后 图 59 桌面它遮挡标注( 3) DB21/T 3469 2021 29 5.3 门轮廓标注 要求 5.3.1 基本要求 为了获得门的范围和位置 进而 更好地进行跟踪和预测 人的行为, 标注门轮廓时 应 标注门的最大可见 连通部分,并且标注后的轮廓只能有一个闭合区域。 5.3.2 门轮廓标注 在标注门的轮廓时,沿着图像中可见的门框标注成一个闭环即可。如果出现其他人物或者他物体遮 挡时,在门的范围内尽可能标注面积最大的可
38、见连通 部分 ,门轮廓的标注样式如图 60、图 61所示。 5.4 窗户轮廓标注 要求 5.4.1 基本要求 标注窗户的目的是为了获得教室中窗户的范围和位置。 在进行人体姿态估计时,确定了窗户的位置, 可以更好地去除光照干扰。标注窗户轮廓时需标注出窗户的最大可见连通部分,并且标注后的轮廓只能 有一个闭合区域。 通常教室内窗户可分为左侧窗户和右侧窗户,左侧窗户即为靠近走廊一侧的窗户(或 相反),右侧窗户为靠近室外一侧的窗户(或相反)。下面分别给出左右侧窗户的轮廓标注样式。 5.4.2 左侧窗户轮廓标注 标注图 像 为左侧窗户时,在可见范围内,标注出每一扇窗户的最大闭环,标注样式如图 62所示。
39、a) 标注前 b) 标注后 图 62 左侧窗户轮廓标注 图 61 门轮廓标注( 2) 图 60 门轮廓标注( 1) DB21/T 34692021 30 5.4.3 右侧窗户轮廓标注 右侧窗户与左侧相比,在图像中的角度较大。标注图像中右侧窗户时,在可见范围内,标注出每一 扇窗户的最大闭环,标注样式如图 63所示。 a) 标注前 b) 标注后 图 63 右侧窗户轮廓标注 DB21/T 3469 2021 31 附 录 A (资料性) 标注示例 下面给出人体轮廓 、 关键点 、 头部 、 手部 、 桌面和门窗的标注示例。对教室中的人体进行标注分为 以下三种情况(以学生视角):摄像头在教室左侧;摄像
40、头在教室右侧;人体正面处于摄像头背立面。 标注示例如图 A.1、图 A.2、图 A.3、图 A.4 和图 A.5 所示, A.1、图 A.2、图 A.3、图 A.4 和图 A.5 分 别为人体轮廓标注示例 、 人体关键点标注示例 、 头部 与 手部标注示例 、 桌面标注样例和门窗标注示例。 A.1 人体轮廓标注示例 a) 摄像头在教室左侧人体轮廓标注 DB21/T 34692021 32 b) 摄像头在教室右侧人体轮廓标注 c)) 人体正面处于摄像头背立面人体轮廓标注 图 A.1 人体轮廓标注示例 DB21/T 3469 2021 33 A.2 人体关键点标注示例 a) 摄像头在教室左侧人体关键点标注 b) 摄像头在教室右侧人体关键点标注 DB21/T 34692021 34 图 A.2 人体关键点标注示例 A.3 手部和头部标注示例 c) 人体正面处于摄像头背立面人体关键点标注 a) 摄像头在教室 左 侧 人体手部头部标注 DB21/T 3469 2021 35 图 A.3 人体手部和头部标注示例 A.4 桌面标注示例 b) 摄像头在教室 右 侧 人体手部头部标注 c) 人体正面处于摄像头背立面人体手部头部 标注 DB21/T 34692021 36 图 A.4