(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202211389464.7 (22)申请日 2022.11.08 (71)申请人 广东卓维网络有限公司 地址 528000 广东省佛山市南海区桂城街 道季华东路33号佛山市电力科技产业 中心1座6 -9层 (72)发明人 王义申　蔡广明　邱北波　刘军　 陈景津　 (74)专利代理 机构 广东穗科知识产权代理事务 所(普通合伙) 44834 专利代理师 黄启文 (51)Int.Cl. G06F 16/9532(2019.01) G06F 16/738(2019.01) G06F 16/78(2019.01)G06F 16/787(2019.01) G06V 20/40(2022.01) G07C 1/20(2006.01) H04N 5/232(2006.01) H04N 7/18(2006.01) (54)发明名称 融合巡检设备的视频处 理系统 (57)摘要 本申请公开了一种融合巡检设备的视频处 理系统， 包括： 巡检设备， 所述巡检设备包括摄像 头， 所述巡检 设备按照设定 路线移动并通过所述 摄像头拍摄的视频信息进行图像识别以完成巡 检任务； 视频摘要服务器， 用于接收所述巡检设 备发送的视频信息， 并根据所述视频信息执行视 频摘要任务， 所述巡检任务和视频摘要任务中识 别的目标对象至少有部分不相同； 其中， 所述巡 检设备向所述视频摘要服务器发送视频信息时， 发送视频信息对应的定位信息； 所述视频摘要服 务器对所述视频信息中的画面帧进行摘要处理， 并将摘要信息、 画面帧、 视频信息和定位信息关 联； 检索服务器， 用于对视频摘要进行检索。 本方 案可以进一 步挖掘数据价 值。 权利要求书2页 说明书8页 附图3页 CN 115455275 A 2022.12.09 CN 115455275 A 1.一种融合巡检设备的视频处 理系统， 其特 征在于， 包括： 巡检设备， 所述巡检设备包括摄像头， 所述巡检设备按照设定路线移动并通过所述摄 像头拍摄的视频信息进行图像识别以完成巡检任务； 视频摘要服务器， 用于接收所述巡检设备发送的视频信息， 并根据所述视频信息执行 视频摘要任务， 所述巡检任务和视频摘要任务中识别的目标对象至少有部 分不相同； 其中， 所述巡检设备向所述视频摘要服务器发送视频信息时， 发送视频信息对应的定位信息； 所 述视频摘要服务器对 所述视频信息中的画 面帧进行摘要处理， 并将摘要信息、 画 面帧、 视频 信息和定位信息关联； 检索服务器， 所述检索服务器用于根据用户输入的摘要关键词、 区域信息和时间信息 的至少之一， 对检索视频信息、 对应的画面帧或者拍摄位置进行检索。 2.根据权利要求1所述的融合巡检设备的视频处理系统， 其特征在于， 所述视频摘要服 务器根据巡检设备的巡检路线对应的视频信息中的摘要密度， 决定是否继续对在该巡检路 线上产生的新的视频信息进行摘要处理； 以及， 所述视频摘要服务器根据巡检设备巡检路 线对应的视频信息中的摘要密度， 决定后续在该巡检路线上产生的新的视频信息的策略； 其中， 所述摘要密度是指在视频中检出目标对象的数量除以处 理的视频帧数的结果。 3.根据权利要求2所述的融合巡检设备的视频处理系统， 其特征在于， 所述根据巡检设 备的巡检路线对应的视频信息中的摘要密度， 决定是否继续对在该巡检路线 上产生的新的 视频信息进行摘要处 理， 具体是： 判断所述摘要密度是否大于第一阈值， 若是， 则决定继续对在该巡检路线上产生的新 的视频信息进行摘要处 理， 若否， 则决定不继续进行视频摘要处 理； 所述根据巡检设备巡检路线对应的视频信 息中的摘要密度， 决定后 续在该巡检路线上 产生的新的视频信息的策略， 具体是： 当所述摘要密度大于第二阈值时， 按照第一间隔对视频信息中的画面帧进行抽取处 理， 当所述摘要密度小于等于第二阈值且大于第一阈值时， 按照第二间隔对视频信息中的 画面帧进行抽取处 理， 其中， 所述第一间隔小于所述第二间隔。 4.根据权利要求3所述的融合巡检设备的视频处理系统， 其特征在于， 所述根据巡检设 备巡检路线对应的视频信息中的摘要密度， 决定是否继续对在该巡检路线 上产生的新的视 频信息进行摘要处 理， 具体还 包括： 对巡检路线对应的视频信息进行分段统计， 得到各分段的摘要密度， 对摘要密度低于 第一阈值的分段进行屏蔽， 并记录该分段对应的起始定位信息和结束定位信息， 基于起始 定位信息和结束定位信息， 对后续在该巡检路线 上产生的视频信息进 行分段屏蔽， 其中， 被 屏蔽的视频信息段不作摘要处 理。 5.根据权利要求1所述的融合巡检设备的视频处理系统， 其特征在于， 还包括终端设 备， 所述终端设备用于获取用户操作以及显示检索结果； 所述终端设备用于在搜索界面中显示地图信 息， 并获取用户的检索的时间信 息和摘要 关键词， 在当前显示的地图信息上加载拍摄区域； 其中， 在加载拍摄区域 时， 终端设备在第一图层中显示地图信 息， 向检索服务器发送所 述时间信息、 摘要关键词和当前显示的地图信息； 检索服务器根据时间信息和摘要关键词检索当前显示的地图区域中所涉及的拍摄区权　利　要　求　书 1/2 页 2 CN 115455275 A 2域， 将检索到的各拍摄区域发送到终端设备； 终端设备根据若干个拍摄区域的并集结果在显示于第一图层之上的第二图层中渲染 具备预设透明度的拍摄区域。 6.根据权利要求5所述的融合巡检设备的视频处理系统， 其特征在于， 所述根据时间信 息和摘要关键词检索当前显示的地图区域中所 涉及的拍摄区域， 具体是： 筛选出属于当前显示的地图区域中并且 满足所述时间信息 选定的时间段的定位信息； 根据所述定位信息关联至对应的候选摘要信息； 根据用户检索的摘要关键词， 从所述 候选摘要信息中进行筛 选得到目标摘要信息； 根据若干个目标摘要信息确定对应的目标定位信息； 根据各所述目标定位信息确定对应的拍摄区域。 7.根据权利要求6所述的融合巡检设备的视频处理系统， 其特征在于， 检索服务器在确 定检索结果之后， 根据检索结果中的目标摘要信息， 关联至目标视频信息， 将所述目标视频 信息加载到缓存之中， 从所述目标视频信息中抽取与目标摘要信息相关的片段和画 面帧进 行缓存， 其中， 与目标摘要信息相关的片段是指， 目标摘要信息对应的视频帧前后设定时间 内的画面帧所构成的子视频； 当若干目标摘要信息的子视频重叠时， 将多个子视频合并为 一个子视频。 8.根据权利要求7所述的融合巡检设备的视频处理系统， 其特征在于， 终端设备在第 二 图层显示所述拍摄区域后， 从 缓存中加载拍摄区域对应的子 视频和画面帧； 当用户选 中显示界面中的拍摄区域后， 根据用户配置的策略加载显示 窗以显示拍摄区 域对应的画面帧或者子 视频。 9.根据权利要求8所述的融合巡检设备的视频处理系统， 其特征在于， 当用户选 中显示 界面中的拍摄区域后， 终端设备根据用户所选中的拍摄区域对应的定位信息和其他拍摄区 域的定位信息， 计算被选中的拍摄区域中心到其他拍摄区域中心之间的距离， 根据检索的 目标对象在当前区域的最大估计速度， 结合拍摄区域对应的画面帧的产生时间， 判断被选 中的拍摄区域和其他拍摄区域之间是否存在关联， 并将与被选中的拍摄区域存在关联的区 域进行标记。 10.根据权利要求9所述的融合巡检设备的视频处理系统， 其特征在于， 所述判断被选 中的拍摄区域和其 他拍摄区域之间是否存在关联， 具体是： 计算各拍摄区域对应的产生 时间与被选 中的拍摄区域对应的产生 时间的差值， 将各拍 摄区域与被选中的拍摄区域之 间的距离以及各拍摄区域对应的差值的绝对值相除， 得到各 拍摄区域对应的估计速度， 当所述估计速度小于所述最大估计速度时， 判定该拍摄区域与 被选中的拍摄区域存在关联， 否则， 判定不存在关联。权　利　要　求　书 2/2 页 3 CN 115455275 A 3