买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

申请/专利权人：东云睿连(武汉)计算技术有限公司

摘要：本发明公开了一种高风险工种作业人员行为预警装置及方法，所述装置包括处理器、视频数据采集单元、人工智能推理分析硬件单元、以及报警控制单元；处理器分别与视频数据采集单元、人工智能推理分析硬件单元、以及报警控制单元电连接；人工智能推理分析硬件单元内置有人脸专注度推理模型，所述人脸专注度推理模型包括人脸识别模型、人体关键点识别模型、人脸关键点检测模型、以及人脸专注度识别模型，所述人脸专注度识别模型还包括人脸朝向算子、关键点状态算子、即时专注度算子、以及连续专注度算子。本发明提出的高风险作业人员的专注度识别与预警方法与装置能够高精度地对作业人员的专注度进行监控预警，具备非常广泛的实用价值。

主权项：1.一种高风险工种作业人员行为预警装置，其特征在于，所述装置包括处理器、视频数据采集单元、人工智能推理分析硬件单元、以及报警控制单元；所述处理器分别与所述视频数据采集单元、所述人工智能推理分析硬件单元、以及所述报警控制单元电连接；所述人工智能推理分析硬件单元内置有人脸专注度推理模型；所述视频数据采集单元，用于对当前作业人员进行人脸采集，将采集到的人脸视频图像数据传输至所述处理器，由所述处理器将所述人脸视频图像数据传输至所述人工智能推理分析硬件；所述人工智能推理分析硬件，用于加载并运行所述人脸专注度推理模型对所述人脸视频图像数据进行处理，所述人脸专注度推理模型包括人脸识别模型、人体关键点识别模型、人脸关键点检测模型、以及人脸专注度识别模型；其中，所述人脸识别模型用于提取所述人脸视频图像数据的当前视频帧图像中的人脸坐标位置信息；所述人体关键点识别模型用于提取所述当前视频帧图像中人体关键点坐标位置信息；所述处理器，用于将所述人脸坐标信息输入所述人脸关键点检测模型中以获取所述当前视频帧图像中的人脸关键点坐标位置信息；所述处理器，还用于将所述人脸关键点坐标信息及所述人体关键点坐标信息输入至所述专注度识别模型以获取人脸关键点分类结果、人体关键点分类结果及面部朝向结果；其中，所述人脸专注度识别模型还包括人脸朝向算子、关键点状态算子、即时专注度算子、以及连续专注度算子；所述处理器，还用于调用所述人脸朝向算子来根据所述面部朝向结果计算当前面部朝向评估值；所述处理器，还用于调用所述关键点状态算子来根据所述人脸关键点分类结果和所述人体关键点分类结果计算关键点评估值；所述处理器，还用于调用所述即时专注度算子来根据所述面部朝向评估值和所述关键点状态评估值计算所述当前视频帧图像中的人脸即时专注值；所述处理器，还用于调用所述连续专注度算子来基于所述人脸即时专注度值和系统设定连续帧计算因子计算多个所述人脸即时专注度值的加权平均得分作为当前人脸连续专注度值；所述处理器，还用于将所述当前人脸连续专注度值与预设系统报警阈值进行比较，根据比较结果向所述报警控制单元发送报警信号；其中，所述人脸关键点分类结果包括人脸遮挡结果类型、眼部结果类型、以及嘴部结果类型；所述人脸遮挡结果类型包括遮挡结果和未被遮挡结果，其中，遮挡结果的关键点评估值低于未被遮挡结果的关键点评估值；在所述人脸遮挡结果类型为遮挡结果的状态时长达到预设时长时，生成并发出报警提示；所述眼部结果类型包括眼闭结果和眼睁结果，其中，眼闭结果的关键点评估值低于眼睁结果的关键点评估值；在所述眼闭结果的状态时长达到预设时长时，生成并发出报警提示；所述嘴部结果类型包括口张结果和口合结果，其中，所述口张结果的关键点评估值低于口合结果的关键点评估值。

全文数据：

权利要求：

百度查询： 东云睿连(武汉)计算技术有限公司 一种高风险工种作业人员行为预警装置及方法