买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

申请/专利权人：浙江大学

摘要：本发明公开了一种基于跨摄像头多目标跟踪的行为识别方法、系统及电子设备，属于行为识别技术领域。该方法包括：视频图像采集；人员区域定位；进行双重目标跟踪：利用位置相似度和匈牙利算法完成单摄像头内目标匹配，利用外观相似度和贪心算法完成跨摄像头间目标匹配，赋予人员编号；行为初步识别；行为综合判别；根据行为综合判别结果对所有摄像头当前帧中目标的行为初步标签进行修正，并在图像中可视化输出存在涉及行为的目标区域及行为标签。本发明解决了基于单帧图像识别的高漏检率和高误检率的问题，使得方法能够在电力基建等作业场景下，实现基于视频监控的高效可靠的人员行为安全管控任务。

主权项：1.一种基于跨摄像头多目标跟踪的行为识别方法，其特征在于，包括：S100：获取场景中多个摄像头的实时视频图像数据；S200：通过完成训练的行人检测模型对所有摄像头所有帧中的目标进行区域定位，得到所有目标的区域坐标；S300：对于单摄像头，当前帧中所有目标的区域坐标和上一帧中所有目标的区域坐标进行位置相似度计算，并用匈牙利算法完成单摄像头内目标匹配，将相互匹配的目标赋予相同的人员编号，得到当前帧目标信息；对于跨摄像头之间，任意摄像头当前帧中所有目标与剩余摄像头当前帧中所有目标利用外观特征进行外观相似度计算，并用贪心算法完成跨摄像头间目标匹配，根据匹配结果对目标的人员编号进行修正；S400：对所有摄像头当前帧中的所有目标进行行为识别，为每个目标赋予相应的行为初步标签；S500：结合多摄像头先前相邻特定帧中相同人员编号的行为初步标签，根据预设的综合判别策略对人员行为类别进行确定，得到行为综合判别结果，包括：S510：输入多摄像头的当前帧中相同人员编号的所有目标；S520：统计输入的所有目标的行为初步标签类别数量，将数量占比最大的类别作为当前帧中相同人员编号下待确定行为类别；S530：获取多摄像头的特定时间间隔内相邻先前帧中所有相同人员编号目标的行为初步标签，计算其中与当前帧待确定行为类别相同的行为初步标签占比；S540：若所述标签占比大于预设占比，则相同人员编号下的行为类别为当前帧待确定行为类别，否则，对应相同人员编号下未进行相关行为；S550：基于S510-S540根据预设的综合判别策略对人员行为类别进行确定，得到行为综合判别结果；其中，所述综合判别策略的参数包括：时间间隔默认参数设定为16帧；预设占比参数设定为90％；S600：根据行为综合判别结果对所有摄像头当前帧中目标的行为初步标签进行修正，并在图像中可视化输出存在涉及行为的目标区域及行为标签。

全文数据：

权利要求：

百度查询： 浙江大学 一种基于跨摄像头多目标跟踪的行为识别方法、系统及电子设备