(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210617512.7 (22)申请日 2022.06.01 (71)申请人 中国电信股份有限公司 地址 100033 北京市西城区金融街31号 (72)发明人 黄金龙　张琳　贺嘉　何美斌　 (74)专利代理 机构 北京康信知识产权代理有限 责任公司 1 1240 专利代理师 张文华 (51)Int.Cl. G06V 20/52(2022.01) G06V 20/40(2022.01) G06V 40/10(2022.01) G06V 40/16(2022.01) G06V 10/46(2022.01) G06V 10/74(2022.01)G06V 10/764(2022.01) G06V 10/766(2022.01) G06V 10/82(2022.01) (54)发明名称 睡眠检测预警方法及装置 (57)摘要 本申请公开了一种睡眠检测预警方法及装 置。 其中， 该方法包括： 获取监控第一对象睡眠的 目标监控图像； 检测目标监控图像中的目标区域 信息和目标关键点信息， 其中， 目标区域信息至 少包括： 人脸区域信息、 肢体区域信息和被子区 域信息， 目标关键点信息包括： 人体关键点信息； 基于目标区域信息和目标关键点信息确定第一 对象的目标睡眠模式； 基于与目标睡眠模式对应 的目标处理方式对目标区域信息和目标关键点 信息进行处理， 得到第一对象的睡眠状态， 并生 成与睡眠状态对应的预警信息。 本申请解决了相 关技术中针对婴幼儿睡眠检测的方案效果不佳， 难以及时进行有效预警的技 术问题。 权利要求书3页 说明书10页 附图3页 CN 114937242 A 2022.08.23 CN 114937242 A 1.一种睡眠检测预警方法， 其特 征在于， 包括： 获取监控第一对象睡眠的目标监控图像； 检测所述目标监控图像中的目标区域信息和目标关键点信息， 其中， 所述目标区域信 息至少包括： 人脸区域信息、 肢体区域信息和被子区域信息， 所述目标关键点信息包括： 人 体关键点信息； 基于所述目标区域信息和所述目标关键点信息确定所述第一对象的目标睡眠模式； 基于与所述目标睡眠模式对应的目标处理方式对所述目标区域信息和所述目标关键 点信息进行处 理， 得到所述第一对象的睡眠状态， 并生成与所述睡眠状态对应的预警信息 。 2.根据权利要求1所述的方法， 其特征在于， 获取监控第一对象睡眠的目标监控图像， 包括： 获取监控所述第一对象睡眠的目标监控视频； 删除所述目标监控视频的所有帧图像中的冗余帧图像和模糊帧图像， 得到所述目标监 控图像。 3.根据权利要求1所述的方法， 其特征在于， 检测所述目标监控图像中的目标区域信 息 和目标关键点信息， 包括： 基于深度 学习中的人脸检测算法检测所述目标监控图像中的所述人脸 区域信息， 所述 人脸区域信息中至少包括： 人脸数量、 人脸种类以及人脸区域 位置； 基于深度学习中的通用目标检测算法检测所述目标监控图像中的所述肢体区域信息 和被子区域信息， 其中， 所述肢体区域信息中至少包括： 肢体区域位置， 所述被子区域信息 中至少包括： 被子覆盖区域 位置； 基于深度 学习中的关键点检测算法检测所述目标监控图像中的所述人体关键点信 息， 所述人体关键点信息中至少包括： 人体关键点数量和人体关键点 位置。 4.根据权利要求3所述的方法， 其特征在于， 基于所述目标区域信 息和所述目标关键点 信息确定所述第一对象的目标睡眠模式， 包括： 在所述人脸数量不超过第 一预设阈值或所述人脸种类中不包括第 二对象的人脸时， 确 定所述目标睡眠模式为第一睡眠模式； 在所述人脸数量超过所述第一预设阈值且所述人脸种类中包括所述第二对象的人脸 时， 确定所述目标睡眠模式为第二睡眠模式。 5.根据权利要求4所述的方法， 其特征在于， 所述第一睡眠模式包括： 第一子睡眠模式 和第二子睡眠模式， 所述第二睡眠模式包括： 第三子睡眠模式和第四子睡眠模式， 基于所述 目标区域信息和所述目标关键点信息确定所述第一对象的目标睡眠模式， 包括： 在所述第一睡眠模式下， 若所述人体关键点数量不超过第二预设阈值， 确定所述目标 睡眠模式为所述第一子睡眠模式， 若所述人体关键点数量超过所述第二预设阈值， 确定所 述目标睡眠模式为所述第二子睡眠模式； 在所述第二睡眠模式下， 若所述人体关键点数量不超过第三预设阈值， 确定所述目标 睡眠模式为所述第三子睡眠模式， 若所述人体关键点数量超过所述第三预设阈值， 确定所 述目标睡眠模式为所述第四子睡眠模式。 6.根据权利要求5所述的方法， 其特征在于， 在所述目标睡眠模式为所述第 一子睡眠模 式时， 基于与所述目标睡眠模式对应的目标 处理方式对所述目标区域信息和所述目标关键权　利　要　求　书 1/3 页 2 CN 114937242 A 2点信息进 行处理， 得到所述第一对象的睡眠状态， 并生成与所述睡眠状态对应的预警信息， 包括： 确定所述第 一对象的人脸区域中心位置和所述被子区域中心位置之间的第 一距离， 以 及所述第一对象的肢体区域 位置和所述被子覆盖区域 位置之间的重合度； 在所述第一距离小于第 四预设阈值时， 确定所述第一对象处于第一睡眠状态， 并生成 第一预警信息， 其中， 所述第一睡眠状态表示所述第一对象盖被子过高， 所述第一预警信息 用于提示需要将被子下拉； 在所述重合度小于第五预设阈值时， 确定所述第一对象处于第二睡眠状态， 并生成第 二预警信息， 其中， 所述第二睡眠状态表示所述第一对象盖被子过低， 所述第二预警信息用 于提示需要将被子上拉。 7.根据权利要求5所述的方法， 其特征在于， 在所述目标睡眠模式为所述第 二子睡眠模 式时， 基于与所述目标睡眠模式对应的目标 处理方式对所述目标区域信息和所述目标关键 点信息进 行处理， 得到所述第一对象的睡眠状态， 并生成与所述睡眠状态对应的预警信息， 包括： 确定所述第 一对象的人体关键点中头部关键点的第 一数量和肢体关键点的第 二数量， 确定第一关键点向量与第二关键点向量之 间的第一角度， 确定双部位关键点之 间的第二距 离， 其中， 所述第一关键点向量为鼻子 关键点到脖子 关键点的向量， 所述第二关键点向量为 双肩关键点的向量的法向量， 所述双部位关键点至少包括以下之一： 双肩关键点、 腰两侧关 键点、 双臂关键点、 双膝盖关键点； 在所述第一数量超过第六预设阈值且所述第 二数量超过第七预设阈值 时， 确定所述第 一对象处于第三睡眠状态， 其中， 所述第三睡眠状态 表示所述第一对象仰卧； 在所述第一数量小于第八预设阈值且所述第 二数量超过第七预设阈值 时， 确定所述第 一对象处于第四睡眠状态， 并生成第三预警信息， 其中， 所述第四睡眠状态表 示所述第一对 象俯卧， 所述第三预警信息用于提 示需要调整所述第一对象的睡姿； 在所述第一角度小于第九预设阈值且所述第 二距离小于第十预设阈值 时， 确定所述第 一对象处于第五睡眠状态， 并生成所述第三预警信息， 其中， 所述第五睡眠状态表示所述第 一对象侧卧。 8.根据权利要求5所述的方法， 其特征在于， 在所述目标睡眠模式为所述第 三子睡眠模 式时， 基于与所述目标睡眠模式对应的目标 处理方式对所述目标区域信息和所述目标关键 点信息进 行处理， 得到所述第一对象的睡眠状态， 并生成与所述睡眠状态对应的预警信息， 包括： 确定所述第二对象的肢体区域中心位置与所述第一对象的肢体区域中心位置之间的 第三距离； 在所述第三距离小于第十一预设阈值时， 确定所述第一对象处于第六睡眠状态， 并生 成第四预警信息， 其中， 所述第六睡眠状态表示所述第二对 象与所述第一对 象之间发生挤 压， 所述第四预警信息用于提 示所述第二对象需要远离所述第一对象。 9.根据权利要求5所述的方法， 其特征在于， 在所述目标睡眠模式为所述第四子睡眠模 式时， 基于与所述目标睡眠模式对应的目标 处理方式对所述目标区域信息和所述目标关键 点信息进 行处理， 得到所述第一对象的睡眠状态， 并生成与所述睡眠状态对应的预警信息，权　利　要　求　书 2/3 页 3 CN 114937242 A 3