(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202211214943.5 (22)申请日 2022.09.30 (71)申请人 广东立胜综合能源服 务有限公司 地址 528200 广东省佛山市南海区桂城街 道季华东路33号佛山市电力科技产业 中心2座16、 17层 (72)发明人 陈莉　钟卫宁　张威城　董威　 陈广恒　 (74)专利代理 机构 广州誉华专利代理事务所 (普通合伙) 44712 专利代理师 罗丹 (51)Int.Cl. G06Q 10/06(2012.01) G06N 20/00(2019.01) G06Q 50/06(2012.01)G06V 10/44(2022.01) G06V 10/762(2022.01) G06V 10/764(2022.01) G06V 20/52(2022.01) H04N 7/18(2006.01) G08B 25/08(2006.01) (54)发明名称 一种电力作业 合规监测系统及方法 (57)摘要 本发明属于安全监管技术领域， 具体涉及一 种电力作业合规监测系统及方法； 本发明可以根 据不同流程、 不同工序的要求， 只需要预先配置 或训练需要检查的物体类别或者物体相互空间 关系， 再利用深度学习模型从作业现场监控视频 中提取的图像特征， 形成时间序列， 并且利用时 间序列聚类算法来分辨作业人员的操作是否合 规， 从而实现对施工现场流程的安全监控。 监测 系统通过图像收集装置实时采集作业人员及其 作业现场的监控视频， 并且上传至服务器。 服务 器对监控视频进行抽帧处理， 并且根据作业流程 规定的工序从抽帧处理获得的图像中提取特征 项， 再通过聚类算法分析视频中作业人员的操作 流程是否满足安全生产规定要求。 权利要求书2页 说明书11页 附图1页 CN 115511329 A 2022.12.23 CN 115511329 A 1.一种电力作业 合规监测系统， 其特 征在于， 所述系统至少包括： 服务器 （101） 、 至少一个图像收集装置 （110） 和/或由考核人员携带至作业现场的巡检 终端； 所述服务器 （101） 通过有线或无线的方式与所述图像收集装置 （110） 和/或巡检终端建 立通信连接； 所述图像收集装置 （110） 实时采集作业人员及其所在作业现场的监控视频并将所述监 控视频上传至所述 服务器 （101） ； 所述巡检终端基于其所在位置之定位信 息从所述服务器 （101） 加载与所在作业现场相 关联的考核问题； 所述巡检终端记录作业人员回答所述考核问题的音频并对所述音频进行分析给出对 作业人员的评价和/或将所述音频 上传至所述 服务器 （101） ； 响应于收到的所述监控视频和/或所述音频， 所述服务器 （101） 分析作业人员的操作 流 程是否满足安全生产规定要求。 2.根据权利要求1所述的电力作业 合规监测系统， 其特 征在于， 所述服务器 （101） 至少包括视频分析 单元 （120） 和综合信息管理单 元 （130） ； 所述视频分析单元 （120） 基于预先存储的作业流程规定的工序判断作业人员的操作流 程是否满足安全生产规定要求； 所述综合信息管理单元 （130） 对作业人员、 设备、 流程信息进行综合管理和展示， 为作 业流程各个环 节提供数据支撑， 对作业行为进行实时管控。 3.根据权利要求2所述的电力作业合规监测系统， 其特征在于， 所述视频分析单元 （120） 配置有深度学习模型， 所述深度学习模型从抽帧处理获得的图像中提取特征项， 其 中， 所述深度学习模型通过对历史图像数据的采集与标注， 提升所述深度学习模型 的识别 效果。 4.根据权利要求3所述的电力作业合规监测系统， 其特征在于， 所述深度 学习模型从抽 帧处理获得的图像中提取特征项， 所述视频分析单元 （120） 将预先存储的所述作业流程规 定的工序的开始特征项和结束 特征项与所述深度学习模型提取的特征项进 行对比， 以确定 作业人员操作的开始和结束。 5.根据权利要求4所述的电力作业合规监测系统， 其特征在于， 在确定作业人员开始操 作的情况下， 所述视频分析单元 （120） 按时间顺序 记录所述深度学习模型提取的特征项， 并 且将所述特 征项及其时间信息存贮至所述综合信息管理单 元 （130） 。 6.根据权利要求5所述的电力作业合规监测系统， 其特征在于， 在确定作业人员结束操 作的情况下， 所述视频分析单元 （120） 汇总从开始特征项至结束 特征项时间段内的特征项， 形成时序数据点； 所述视频分析单元 （120） 通过运行聚类算法对所述时序数据点进行分析， 以判断作业 人员的操作是否合 规。 7.根据权利要求6所述的电力作业合规监测系统， 其特征在于， 所述视频分析单元 （120） 将开始特 征项至结束特 征项时间段内的特 征项分类到不同检查 点。 8.根据权利要求7所述的电力作业合规监测系统， 其特征在于， 所述服务器 （101） 还包 括通信单元 （140） ， 所述通信单元 （140） 与所述图像收集装置 （110） 通过有线或无线的方式权　利　要　求　书 1/2 页 2 CN 115511329 A 2建立通信连接； 其中， 所述图像收集装置 （110） 实时采集的监控视频通过所述通信单元 （140） 传输至所 述视频分析 单元 （120） 和/或所述综合信息管理单 元 （130） 。 9.一种电力作业 合规监测方法， 其特 征在于， 所述方法至少包括： 实时采集和上传作业人员及其作业现场的监控视频； 对所述监控视频进行抽帧处理， 并且根据作业流程规定的工序， 从抽帧处理获得的图 像中提取 特征项； 基于所述特征项分析视频中作业人员的操作流程是否满足安全生产规定要求； 以及， 记录作业人员回答与 作业现场关联的考核问题的音频以及转换为文本格式的回答信息； 基于对所述回答信息的分析 给出对作业人员的评价。 10.根据权利要求9所述的电力作业 合规监测方法， 其特 征在于， 所述方法还 包括： 利用深度学习模型从抽帧处理获得的所述图像中提取特征项， 其中， 所述深度学习模 型通过对历史图像数据的采集与标注， 提升所述深度学习模型的识别效果； 将预先存储的所述作业流程规定的工序的开始特征项和结束特征项与所述深度学习 模型提取的特 征项进行对比， 以确定作业人员操作的开始和结束。权　利　要　求　书 2/2 页 3 CN 115511329 A 3