(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210870951.9 (22)申请日 2022.07.22 (71)申请人 中航电测仪 器股份有限公司 地址 723007 陕西省汉中市经济开发北区 鑫源路 (72)发明人 胡腾　杨春　韩旭　杨杰　谭义峰　 (74)专利代理 机构 西安通大专利代理有限责任 公司 6120 0 专利代理师 王艾华 (51)Int.Cl. G06V 40/16(2022.01) G06V 40/20(2022.01) G06V 10/74(2022.01) G06V 10/774(2022.01) G06T 7/246(2017.01)G06T 7/80(2017.01) G07C 9/37(2020.01) H04N 7/18(2006.01) (54)发明名称 一种多相机人员状态 识别方法 (57)摘要 本发明公开了一种多相机人员状态识别方 法， 包括信息采集模块、 算法 处理模块、 数据传输 与通信模块、 数据发布模块、 人员分析模块五个 部分。 利用室内安装的多个摄像头， 研究基于机 器视觉的人员检测、 身份识别、 动态跟踪、 人员特 征识别和肢体动作识别算法， 实现工业室内环境 下的人员身份识别、 人员精确检测、 人员活动过 程准确跟踪和人员抓取物品动作的识别。 并实现 相关信息的存储、 上传、 管理和可视化展示。 具有 低成本、 高实时、 覆盖全面、 效率高等特点。 权利要求书2页 说明书4页 附图3页 CN 115100724 A 2022.09.23 CN 115100724 A 1.一种多相机人员状态 识别方法， 其特 征在于， 识别步骤如下： 通过信息采集模块， 将数据通过传输与通信模块传输至算法处理模块， 经过技术处理 后将已处 理过的数据又通过传输与通信模块传输 至数据发布模块与人员分析模块； 基于图像处理的人员身份管理， 设计基于残差神经网络模型ResNet为主干网络的以人 脸为主要特征的128维人员身份识别向量， 提高人员身份识别精度； 设计基于GrabCut的人 脸兴趣区域 ROI提取方法， 对人员检测结果的兴趣区进 行建模， 通过建立具有空间位置和距 离限定的人脸特 征匹配方法， 解决人员身份特 征提取及匹配问题； 人员检测、 定位与跟踪， 制作用于室内环境监测的人员检测数据集， 基于深度学习网络 人员数据集进行训练得到适用于室内环境的人员检测模型， 通过设计相 机标定方法， 对监 控相机图像数据进 行空间标定， 为提供二 维定位模式提供数据基准， 以高精度、 高效的标定 参数为基础， 获取单个相 机下高精度的人员定位信息， 设计基于视频序列的人员跟踪算法 框架， 实现单个相机下多个人员的轨 迹信息提取， 完成人员跟踪； 多相机覆盖区大范围多人员轨迹分析， 基于单相机下的高精度人员 检测、 定位及跟踪 结果， 设计多相 机联合的适用于仓库监控区域的人员多目标跟踪算法， 得到大范围空间的 人员轨迹信息， 针对仓库物料区域位置、 关键 设备所在地等现实使用环境， 制定多 人员轨迹 分析方法， 对人员使用物料领用与存放、 位置巡查等操作的规范性、 正确性、 风险等建立分 析参数标准， 基于轨迹信息提出对人员操作和巡查分析算法， 最终得出人员 在仓库空间的 行为分析指标和评价指标， 对定位及轨 迹信息分析 结果进行 标准化， 并进行 预报和发布。 2.根据权利要求1所述一种 多相机人员状态识别方法， 其特征在于， 以覆盖监控区域的 多个相机时间同步和时空重建为基础， 以采集的视频数据为数据源， 通过研究人员入口身 份识别和管理方法， 并建立单相机场景下的人员定位 ‑检测‑跟踪模型， 构建人员在室内运 动过程中的特征建模方法和识别方法， 完成多相机覆盖区域联合视觉感知下的多 人员目标 检测跟踪、 人员轨迹提取与分析方法等研究， 实现监控、 管理、 信息发布一体化的应用， 为 实 现该方法， 采用硬件包括信息采集模块、 算法处理模块、 数据传输与通信模块、 数据发布模 块、 人员分析模块五个部分。 3.根据权利要求1所述一种 多相机人员状态识别方法， 其特征在于， 信 息采集模块为数 据采集设备， 主要为主要布设于 室内生产区域、 关键位置区、 关键物料区及设施处的多个摄 像头， 实现自动采集 监控视频。 4.根据权利要求1所述一种 多相机人员状态识别方法， 其特征在于， 算法处理模块主要 分为人员身份识别， 人员检测与定位， 人员轨迹分析， 完成对采集视频的处理， 提供身份识 别功能、 人员位置计算以及运动轨 迹提取功能。 5.根据权利要求1所述一种 多相机人员状态识别方法， 其特征在于， 数据传输与通信模 块将采集到的监控视频实时传输到中心 服务器， 利用深度学习技术处理后的监测数据传输 给工作人员和管理人员， 采用蓝牙、 有线网络或Wi ‑Fi等多种 通信方式， 算法处理模块的各 个功能之间进行 数据的传输采用HT TP、 TCP/IP网络传输协议。 6.根据权利要求1所述一种 多相机人员状态识别方法， 其特征在于， 数据发布模块将最 终获得的员工数据以各个数据库表格的形式进行记录， 在网页端 进行点击查看。 7.根据权利要求1所述一种 多相机人员状态识别方法， 其特征在于， 人员分析模块利用 分析得到的员工身份识别信息、 位置和轨迹信息， 进 行人员何时到达物料区、 何时离开物料权　利　要　求　书 1/2 页 2 CN 115100724 A 2区、 人员进入与离开仓库或者厂区、 到过哪些位置、 位置是否为关键位置、 是否是该人员需 要达到的区域信息 。权　利　要　求　书 2/2 页 3 CN 115100724 A 3