(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210824180.X (22)申请日 2022.07.14 (71)申请人 江苏富衍信息科技有限公司 地址 210013 江苏省南京市 鼓楼区古平岗4 号A座405室 (72)发明人 王言伟　鄂小松　王锋　李勇　 金深　刘晨哲　张恒　蒋宏斌　 (74)专利代理 机构 北京科领智诚知识产权代理 事务所(普通 合伙) 11782 专利代理师 陈士骞 (51)Int.Cl. G06V 20/40(2022.01) G06V 40/10(2022.01) G06V 10/46(2022.01) G06V 10/24(2022.01)G06V 10/74(2022.01) G06V 10/82(2022.01) G06N 3/04(2006.01) (54)发明名称 一种行人的识别方法、 装置、 设备及 介质 (57)摘要 本发明实施例公开了一种行人的识别方法、 装置、 设备及介质。 其中， 该法包括： 将视频序列 划分为进序列和出序列； 分别将进序列和出序列 划分为朝向摄像头子序列和背离摄像头子序列； 将出序列和进序列中朝向相同的子序列进行匹 配； 在匹配过程中， 对于其中一个待匹配子序列 中的待匹配对象， 确定该待匹配对象的头部关键 点到图像中心点的第一欧式距离， 并确定与待匹 配子序列进行匹配的对应子序列中的各个对象 的头部关键点到图像中心点的第二欧式距离； 从 与待匹配子序列进行匹配的对应子序列中确定 出欧式距离关系满足预设距离要求的候选图像 序列， 并从候选图像序列中确定目标图像序列。 通过采用上述技术方案， 有效提高了行人识别的 准确度。 权利要求书3页 说明书13页 附图4页 CN 115131713 A 2022.09.30 CN 115131713 A 1.一种行 人的识别方法， 其特 征在于， 包括： 按照视频序列中行人的运动轨迹， 将视频序列划分为进序列和出序列， 其中， 所述进序 列中行人的运动轨迹为从图像底部到图像顶部； 所述出序列中行人的运动轨迹为从图像顶 部到图像底部； 根据行人头部关键点坐标， 分别将所述进序列和出序列划分为朝向摄像头子序列和背 离摄像头子序列； 其中， 对于所述进序列， 朝向摄像头子序列中行人的头部 关键点纵坐标大 于所在图像中心 点纵坐标， 背离摄像头子序列中的行人的头部 关键点纵坐标小于所在图像 中心点纵坐标； 对于所述出序列， 朝向摄像头子序列中的行人的头部关键点纵坐标小于所 在图像中心 点纵坐标， 背离摄像头子序列中的行人的头部 关键点纵坐标大于所在图像中心 点纵坐标； 将所述出序列中朝向摄像头子序列与所述进序列中朝向摄像头子序列进行匹配， 并将 所述出序列中背离摄 像头子序列与所述进序列中背离摄 像头子序列进行匹配； 在匹配过程中， 对于其中一个待匹配子序列中的待匹配对象， 确定该待匹配对象的头 部关键点到图像中心 点的第一欧式距离， 并确定与所述待匹配子序列进 行匹配的对应子序 列中的各个对象的头 部关键点到图像中心点的第二欧式距离； 根据第一欧式距离和第 二欧式距离之间的欧式距离关系， 从与 所述待匹配子序列进行 匹配的对应子序列中确定出 所述欧式距离关系满足预设距离要求的候选图像序列； 从所述候选 图像序列中确定目标图像序列， 其中， 所述目标图像序列中存在与所述待 匹配对象为同一对象的目标对象。 2.根据权利要求1所述的方法， 其特征在于， 根据第 一欧式距离和第 二欧式距离之间的 欧式距离关系， 从与所述待匹配子序列进 行匹配的对应子序列中确定出所述欧式距离 关系 满足预设距离要求的候选图像序列， 包括： 计算第一欧式距离和各个第 二欧式距离差值的绝对值， 所述绝对值用于表示第 一欧式 距离和第二欧式距离之间的欧式距离关系； 将得到的各个绝对值按照从小到大的顺序进行排序， 并从排序后的各个绝对值中选择 数值排列在前Q 位的目标绝对值； 其中， Q 为正整数； 将所述目标绝对值所对应的图像序列作为与所述待匹配子序列进行匹配的对应子序 列中的候选图像序列。 3.根据权利要求1或2所述的方法， 其特征在于， 所述确定与所述待匹配对象为同一对 象的目标候选对象所对应的目标图像序列， 包括： 确定所述待匹配对象对应的图像帧与各个候选图像序列之间的余弦距离和欧式距离 关系； 根据所述欧式距离关系， 确定各候选图像序列的匹配权 重； 根据所述匹配权重和所述余弦距离， 计算各候选图像序列中的候选对象与 所述待匹配 序列中的待匹配对象的匹配距离， 并将匹配距离最小的候选图像序列 作为目标图像序列。 4.根据权利要求1 ‑3任一所述的方法， 其特征在于， 所述计算各候选图像序列中的候选 对象与所述待匹配序列中的待匹配对象的匹配距离， 包括： 按照如下公式计算所述匹配距离：权　利　要　求　书 1/3 页 2 CN 115131713 A 2其中， Si表示待匹配序列与第i帧候选图像序列之间的余弦距离； 表示匹 配权重； FDi表示待匹配序列与第i帧候选图像序列之间的欧式距离关系； j为候选图像序列 中的第j个候选对象； m表示朝向摄 像头子序列和背离摄 像头子序列的视频帧数之和。 5.根据权利要求1所述的方法， 其特征在于， 所述行人头部关键点坐标是通过将行人图 像进行旋转， 使得旋转后两个肩膀关键点连线与图像中心和头部关键点的连线垂直时， 所 对应的头 部关键点 坐标。 6.根据权利要求5所述的方法， 其特 征在于， 按照如下公式， 对图像进行旋转： 其中， tx＝x ‑Cx,ty＝y ‑Cy； θ＝θ2 ‑θ1， 表示需要旋转的角度； θ1＝arctan((Syr‑Syl)/ (Sxr‑Sxl))表示肩膀两个关键点连线与水平线夹角； θ2＝arctan( ‑(Hy‑Cy)/(Hx‑Cx))表示 图像中心与头部关键点连线的垂线与水平线夹角； (Hx,Hy)表示旋转之前的头部关键点坐 标； (Sxl,Syl)和(Sxr,Syr)分别表示图像旋转之前左右肩部关键点坐标； (Cx,Cy)表示图像 中心点坐标； (x,y)表 示头肩检测矩形框对应的图像中的任意一点； (x ′,y′)表示(x,y)围绕 图像中心经过旋转后的点； tx表示头肩检测矩形框对应的图像中的任意一点的横坐标到图 像中心点横坐标的距离； ty表示头肩检测矩形框对应的图像中的任意一点的纵坐标到图像 中心点纵坐标的距离 。 7.一种行 人的识别装置， 其特 征在于， 包括： 视频序列划分模块， 被配置为按照视频序列中行人的运动轨迹， 将视频序列划分为进 序列和出序列， 其中， 所述进序列中行人的运动轨迹为从图像底部到图像顶部； 所述出序列 中行人的运动轨 迹为从图像顶部 到图像底部； 子序列划分模块， 被配置为根据行人头部关键点坐标， 分别将所述进序列和出序列划 分为朝向摄像头子序列和背离摄像头子序列； 其中， 对于所述进序列， 朝向摄像头子序列中 行人的头部 关键点纵坐标大于所在图像中心 点纵坐标， 背离摄像头子序列中的行人的头部 关键点纵坐标小于所在图像中心点纵坐标； 对于所述出序列， 朝向摄像头子序列中的行人 的头部关键点纵坐标小于所在图像中心 点纵坐标， 背离摄像头子序列中的行人的头部 关键 点纵坐标 大于所在图像中心点纵坐标； 子序列匹配模块， 被配置为将所述出序列中朝向摄像头子序列与所述进序列中朝向摄 像头子序列进 行匹配， 并将所述出序列中背离摄像头子序列与所述进序列中背离摄像头子 序列进行匹配； 在匹配过程中， 对于其中一个待匹配子序列中的待匹配对象， 确定该待匹配 对象的头部 关键点到图像中心点的第一欧式距离， 并确定与所述待匹配子序列进 行匹配的 对应子序列中的各个对象的头 部关键点到图像中心点的第二欧式距离； 候选图像序列确定模块， 被配置为根据第 一欧式距离和第 二欧式距离之间的欧式距离 关系， 从与所述待匹配子序列进 行匹配的对应子序列中确定出所述欧式距离关系满足预设权　利　要　求　书 2/3 页 3 CN 115131713 A 3