(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210468470.5 (22)申请日 2022.04.29 (71)申请人 中国农业银行股份有限公司 地址 100005 北京市东城区建国门内大街 69号 (72)发明人 文雪　 (74)专利代理 机构 北京集佳知识产权代理有限 公司 11227 专利代理师 柳虹 (51)Int.Cl. G06V 20/40(2022.01) G06V 10/80(2022.01) G06V 10/82(2022.01) G06N 3/04(2006.01) G06N 3/08(2006.01) (54)发明名称 一种视频处 理方法及装置 (57)摘要 本发明提供一种视频处理方法及装置， 从待 处理视频中抽取目标图像帧， 利用卷积神经网络 对目标图像帧进行特征提取， 得到目标图像帧中 的目标对象的特征， 在确定目标对象的特征满足 预设条件时， 进行告警， 因此可 以智能的分析目 标图像帧中的不合规行为。 卷积神经网络包括第 一卷积层、 第二卷积层、 第三卷积层和第一融合 层， 第一卷积层、 第二卷积层和第三卷积层用于 并行对目标图像帧进行特征提取， 第一融合层用 于对第一卷积层、 第二卷积层和第三卷积层的输 出结果进行融合， 即通过具有非对称卷积层的卷 积神经网络， 在不增加任何计算开销的情况下增 强网络的特征表达能力， 使该网络在不降低检测 速度的前提下提高了 检测准确率。 权利要求书2页 说明书8页 附图3页 CN 114821426 A 2022.07.29 CN 114821426 A 1.一种视频处 理方法， 其特 征在于， 所述方法包括： 从待处理视频中抽取目标图像帧； 利用卷积神经网络对所述目标图像帧进行特征提取， 以得到所述目标图像帧中的目标 对象的特征； 所述卷积神经网络包括第一卷积层、 第二卷积层、 第三卷积层和第一融合层， 所述第一卷积层的卷积核尺寸为N ×N， 所述第二卷积层的卷积核尺寸为N ×1， 所述第三卷 积层的卷积核尺寸为1 ×N， 所述第一卷积层、 所述第二卷积层和所述第三卷积层用于并行 对所述目标图像 帧进行特征提取， 所述第一融合层用于对所述第一卷积层、 所述第二卷积 层和所述第三卷积层的输出 结果进行融合； 所述 N为正整数； 在确定所述目标对象的特 征满足预设条件时， 进行告警。 2.根据权利要求1所述的方法， 其特征在于， 所述卷积神经网络还包括与所述第 一融合 层连接的残差网络， 用于对所述第一融合层的输出结果进行 处理， 输出所述图像特征； 所述 残差网络包括第一卷积分支、 第二卷积分支和第二融合层， 所述第一卷积分支和所述第二 卷积分支用于并行对所述第一融合层的输出结果进行 处理， 所述第二融合层用于对所述第 一卷积分支和所述第二卷积分支的输出结果进行融合； 所述第一卷积分支包括三层卷积 层， 所述第二卷积分支包括 一层卷积层。 3.根据权利要求2所述的方法， 其特征在于， 所述第 一卷积分支包括依次连接的第四卷 积层、 第五卷积层和第六卷积层， 所述第二卷积分支包括第七卷积层， 所述第四卷积层、 所 述第六卷积层和所述第七卷积层的卷积核尺寸为1 ×1， 所述第 五卷积层的卷积核尺寸为N ×N。 4.根据权利要求1 ‑3任一项所述的方法， 其特征在于， 所述待处理视频由视频获取设备 录制得到， 所述目标图像帧的录制时刻与抽取时刻之间的时长小于预设时长 。 5.根据权利要求1 ‑3任一项所述的方法， 其特 征在于， 所述 N为3。 6.一种视频处 理装置， 其特 征在于， 所述装置包括： 图像抽取 单元， 用于从待处 理视频中抽取目标图像帧； 目标检测单元， 用于利用卷积神经网络对所述目标图像帧进行特征提取， 以得到所述 目标图像帧中的目标对象的特征； 所述卷积神经网络包括第一卷积层、 第二卷积层、 第三卷 积层和第一融合层， 所述第一卷积层的卷积核尺寸为N ×N， 所述第二卷积层的卷积核尺寸 为N×1， 所述第三卷积层的卷积核尺寸为 1×N， 所述第一卷积层、 所述第二卷积层和所述第 三卷积层用于并行对所述目标图像帧进行特征提取， 所述第一融合层用于对所述第一卷积 层、 所述第二卷积层和所述第三卷积层的输出 结果进行融合； 所述 N为正整数； 告警单元， 用于在确定所述目标对象的特 征满足预设条件时， 进行告警。 7.根据权利要求6所述的装置， 其特征在于， 所述卷积神经网络还包括与所述第 一融合 层连接的残差网络， 用于对所述第一融合层的输出结果进行 处理， 输出所述图像特征； 所述 残差网络包括第一卷积分支、 第二卷积分支和第二融合层， 所述第一卷积分支和所述第二 卷积分支用于并行对所述第一融合层的输出结果进行 处理， 所述第二融合层用于对所述第 一卷积分支和所述第二卷积分支的输出结果进行融合； 所述第一卷积分支包括三层卷积 层， 所述第二卷积分支包括 一层卷积层。 8.根据权利要求7所述的装置， 其特征在于， 所述第 一卷积分支包括依次连接的第四卷 积层、 第五卷积层和第六卷积层， 所述第二卷积分支包括第七卷积层， 所述第四卷积层、 所权　利　要　求　书 1/2 页 2 CN 114821426 A 2述第六卷积层和所述第七卷积层的卷积核尺寸为1 ×1， 所述第 五卷积层的卷积核尺寸为N ×N。 9.根据权利要求6 ‑8任一项所述的装置， 其特征在于， 所述待处理视频由视频获取设备 录制得到， 所述目标图像帧的录制时刻与抽取时刻之间的时长小于预设时长 。 10.根据权利要求6 ‑8任一项所述的装置， 其特 征在于， 所述 N为3。权　利　要　求　书 2/2 页 3 CN 114821426 A 3