(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210748800.6 (22)申请日 2022.06.28 (71)申请人 广州阿凡提电子科技有限公司 地址 510000 广东省广州市海珠区新港西 路135号大院园西区705号楼中大科技 园B座自编号1314,1315室 (72)发明人 张征　 (74)专利代理 机构 北京深川专利代理事务所 (普通合伙) 16058 专利代理师 李焕焕 (51)Int.Cl. H04N 7/18(2006.01) H04N 21/433(2011.01) H04N 21/44(2011.01) H04N 21/442(2011.01) (54)发明名称 一种直播效果监控处理方法及系统 (57)摘要 本发明公开了一种直播效果监控处理方法 及系统， 属于直播视频技术领域， 包括对直播内 容进行录制缓存， 从缓存录像中计算出直播历史 关键帧图像， 再对历史关键帧图像进行检测， 采 用亮度异常检测、 偏色检测、 图像噪声检测、 条纹 噪声检测、 清晰度检测、 信号丢失检测、 画面冻结 检测和画面滚动及抖动检测等多种检测方式对 历史关键帧图像进行全 方面检测， 最后根据检测 结果进行结合判断， 判断当前直播内容是否符合 直播标准， 本发明能对直播视频进行多角度检 测， 使得检测结果全面且实用， 提高检测结果的 可靠性， 从数据角度直观的体现直播流的质量， 便于工作人员对用户观看直播视频的质量情况 进行了解。 权利要求书2页 说明书6页 附图3页 CN 115118934 A 2022.09.27 CN 115118934 A 1.一种直 播效果监控处理方法， 其特 征在于， 采用以下步骤： 步骤1： 对直 播内容进行录制缓存， 从 缓存录像中计算出直 播历史关键帧图像； 步骤2： 对历史关键帧图像进行检测， 检测内容包括： 亮度异常检测、 偏色检测、 图像噪 声检测、 条纹噪声检测、 清晰度检测、 信号丢失检测、 画面冻结检测 和画面滚动及抖动检测； 步骤3： 根据检测结果进行 结合判断， 判断当前直 播内容是否符合标准。 2.根据权利要求1所述的一种直播效果监控处理方法， 其特征在于： 所述亮度异常检测 方法如下： 把关键帧图像转化为灰度图像， 计算灰度化图像的平均灰度值G， 预设阈值A和B， 当G∈[0,A]， 判断图像偏暗， 当 G∈[B,25 5]判断图像偏亮。 3.根据权利要求2所述的一种直播效果监控处理方法， 其特征在于： 所述偏色检测方法 如下： 提取关键帧图像的色度分量H， 计算色度分量H的直方图， 计算直方图最大bin在直方 图中的比例， 比例值计算结果 为偏色值。 4.根据权利要求3所述的一种直播效果监控处理方法， 其特征在于： 所述图像噪声检测 方法如下： 预设四个卷积模板， 卷积模板的方向分别为0 °、 45°、 90°和135°， 使用四个卷积模 板对关键帧图像做卷积 计算， 计算得到四个卷积绝对值最小值Min， 通过卷积绝对值最小值 Min检测噪声点， 同时计算得到关键帧图像的灰度图gray和值滤波图median， 使用灰度图 gray和值滤波图median对噪声点进行判断， 噪声点占关键帧图像的比例为雪花噪声率。 5.根据权利要求4所述的一种直播效果监控处理方法， 其特征在于： 所述条纹噪声检测 方法如下： 提取关键帧图像的色度分量， 根据色度分量计算得到DFT 频谱图， 计算DFT 频谱图 中的异常亮点数， 若异常亮点数 大于预设阈值， 则异常亮点数为条纹检测值。 6.根据权利要求5所述的一种直播效果监控处理方法， 其特征在于： 所述清晰度检测方 法如下： 将关键帧图像分割成N*M的区域， 求每个区域的对比度， 所有对比度的平均值为清 晰度的模糊率。 7.根据权利要求6所述的一种直播效果监控处理方法， 其特征在于： 所述信号丢失检测 方法如下： 将关键帧图像二值化， 偏黑的部分为前景， 其他部分为背景， 对前景进行连通区 域检测， 求得最大连通区域面积， 最大连通区域面积在关键帧图像中占的面积比例即为信 号丢失率。 8.根据权利要求7所述的一种直播效果监控处理方法， 其特征在于： 所述画面冻结检测 方法如下： 每隔T帧从关键帧图像抽取一帧， 获取抽取帧的直方图， 计算相邻两帧直方图的 相似度， 当相似度大于预设阈值时， 认为二帧一致， 当一致的帧数的数量达到预设数量值 时， 判断视频 出现画面发生冻结。 9.根据权利要求8所述的一种直播效果监控处理方法， 其特征在于： 所述画面滚动及抖 动检测方法如下： 画面滚动是获取云台运动前N帧关键帧图像， 进行背景建模， 得到运动前 背景， 发送运动指令至云台， 让云台进行运动， 改变场景， 取云台运动后N 帧图像， 进行背景 建模， 得到运动后背 景， 对比运动前背 景和动后背景的颜色直方图相似度， 当相似度大于预 设数值时， 认为云台运动有故障； 画 面抖动从关键帧图像中每个预设 间隔抽取一帧， 对取到 的每帧图像进 行特征点提取， 对检测的相 邻两帧进 行特征点匹配， 得到匹配矩阵， 当匹配矩 阵大于预设值时认为这两帧画面有抖动， 当抖动帧数大于预设数量值时认为直播画 面发生 抖动。 10.一种直 播效果监控处理系统， 其特 征在于， 包括：权　利　要　求　书 1/2 页 2 CN 115118934 A 2录制模块， 用于 录制直播视频内容； 关键帧模块， 用于从视频内容内提取 出关键帧图像； 存储模块， 用于缓存录制模块录制的数据， 保存关键帧模块 提取出的关键帧图像； 亮度异常模块， 用于对关键帧图像的亮度进行异常检测； 偏色模块， 用于计算整体偏色值； 图像噪声模块， 用于计算噪声点在关键帧图像中的比例； 条纹噪声模块， 用于计算关键帧图像中的异常亮点数； 清晰度模块， 用于计算关键帧图像清晰度的模糊率； 信号丢失模块， 用于计算 最大连通区域 面积在关键帧图像中占的面积比例； 画面冻结模块， 用于计算并判断视频 是否出现画面发生冻结； 画面滚动模块， 用于判断视频云台运动有故障； 画面抖动模块， 用于计算抖动帧数量 值， 判断直 播画面是否发生抖动； 结果判断模块， 用于根据检测结果判断当前直 播画面是否符合 直播标准。权　利　要　求　书 2/2 页 3 CN 115118934 A 3