全网唯一标准王
(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210443188.1 (22)申请日 2022.04.26 (71)申请人 扬州智能科技有限公司 地址 225000 江苏省扬州市文昌西路新港 名城花园商铺171号 (72)发明人 杨正庆 董星 袁晟 刘杨  (74)专利代理 机构 北京文苑专利代理有限公司 11516 专利代理师 王中五 (51)Int.Cl. G06F 16/23(2019.01) G06F 16/2455(2019.01) G06F 11/34(2006.01) G06F 16/27(2019.01) (54)发明名称 一种基于综合监控管理的数据监控方法及 系统 (57)摘要 本发明涉及数据监控技术领域, 尤其为一种 基于综合监控 管理的数据监控 方法及系统, 包括 根据预设时间段随机抓取目标时间段内即将存 入标准数据库的数据, 将目标时间段内的数据根 据时间段长度进行等分, 存入监控 数据库的分布 式存储数据格, 按照 初次存入的时间段对各个存 储数据格内的数据打上时间节 点标签, 在下一个 预设时间段开始前对通过分布式存储数据格中 时间节点标签对应标准数据库进行匹配, 若匹配 失败, 则定位到标准数据库中对应数据的位置进 行数据校验。 本发明通过临时存储在服务器内存 中的数据来替换校验出错的数据, 则能够实时保 证数据的完整度和精确度, 同时占用资源 小。 权利要求书2页 说明书4页 附图2页 CN 114706871 A 2022.07.05 CN 114706871 A 1.一种基于综合 监控管理的数据监控方法, 其特 征在于: 包括如下步骤: 根据预设时间段随机抓取目标时间段内即将存入标准数据库的数据, 将目标时间段内 的数据根据时间段长度进行等分, 存入监控数据库的分布式存储数据格, 按照初次存入的 时间段对各个存储数据格内的数据打上时间节点标签, 在下一个预设时间段开始前对通过 分布式存储数据格中时间节点标签对应标准数据库进行匹配, 若匹配失败, 则定位到标准 数据库中对应数据的位置进行 数据校验。 2.根据权利要求1所述的基于综合监控管理 的数据监控方法, 其特征在于: 所述随机抓 取目标时间段内即将存入标准数据库的数据采用以下原则, 对存入标准数据库的数据进 行 起始点标记和终止点标记, 通过所述起始点标记和终止点标记计算数据存入时间, 若数据 存入时间落入 存入时间阈值范围内, 则对该 数据和其间隔段的数据进行抓取。 3.根据权利要求3所述的基于综合监控管理 的数据监控方法, 其特征在于: 所述对该数 据随机间隔段的数据进行抓取为对当前抓取数据前后间隔 的数据进行抓取, 其中, tδ 为当前存入标准数据库的数据与上一个存入标准数据库的时间的间隔时间, tl为当前数据 存入时间, n 为目标时间段内当前存 入数据的数量。 4.根据权利要求1所述的基于综合监控管理 的数据监控方法, 其特征在于: 在下一个预 设时间段开始前对通过分布式存储数据格中时间节点标签对应标准数据库进行匹配具体 通过如下公式进行匹配: 其中, Si表示第i个时间节点, α 指的是每个时间段内的存储数据格内的数据 样本, p表示 数据格的数量, q表示的是 数据根据时间段长度等分的数量。 5.根据权利要求1所述的基于综合监控管理 的数据监控方法, 其特征在于: 还包括根据 匹配不成功的数据进 行前后时间节点定位, 在标准数据库中定位到前后时间节点之 间的数 据, 将该段数据进 行删除, 并从数据输入历史记录中重新调取数据对删除的数据进 行补充, 补充完成后再次通过分布式存 储数据格中时间节点标签对应标准数据库进行匹配。 6.根据权利要求5所述的基于综合监控管理 的数据监控方法, 其特征在于: 所述输入历 史记录为当前预设时间段数据存入标准数据库之前存储在本地的临 时数据, 在下一个预设 时间段开始后进行清零。 7.一种基于综合监控管理的数据监控系统, 其特征在于: 包括标准数据库和监控数据 库, 所述监控数据库包括若干 分布式存储数据格, 所述标准数据库用于存储服务器的数据, 所述监控数据库用于通过分布式数据格分别存 储输入的监控数据段。 8.根据权利要求7所述的基于综合监控管理 的数据监控系统, 其特征在于: 还包括数据 截取模块(100)、 标签生成模块(200)、 数据匹配模块(300)和数据校验模块(400), 所述数据 截取模块(100)用于根据预设时间段随机抓取目标时间段内即将存入标准数据库的数据, 将目标时间段内的数据根据时间段长度进行等分, 存入监控数据库的分布式存储数据格, 所述标签生成模块(200)用于按照初次存入的时间段对 各个存储数据格内的数据打上时间 节点标签, 所述数据匹配模块(300)用于在下一个预设时间段开始前对通过分布式存储数权 利 要 求 书 1/2 页 2 CN 114706871 A 2据格中时间节点标签对应标准数据库进行匹配, 所述数据校验模块(400)用于在数据匹配 模块(300)匹配任务失败时定位到标准数据库中对应数据的位置进行 数据校验。 9.根据权利要求8所述的基于综合监控管理 的数据监控系统, 其特征在于: 所述数据截 取模块(100)包括数据标记单元(101)和截取判断单元(102), 所述数据标记单元(101)用于 对存入标准数据库的数据进行起始点标记和终止点标记, 所述截取判断单元(102)用于通 过所述起始 点标记和终止点标记计算数据存入时间, 若数据存入时间落入存入时间阈值范 围内, 则对该 数据和其间隔段的数据进行抓取。 10.根据权利要求8所述的基于综合监控管理的数据监控系统, 其特征在于: 所述数据 校验模块(400)包括数据定位单元(401)和数据处理单元(402), 所述数据定位单元(401)根 据匹配不成功的数据进行前后时间节点定位, 在标准数据库中定位到前后时间节点之 间的 数据, 所述数据处理单元(402)用于将所述数据定位单元(401)定位到的数据进行删除, 并 从数据输入历史记录中重新调取 数据对删除的数据进行补充。权 利 要 求 书 2/2 页 3 CN 114706871 A 3

PDF文档 专利 一种基于综合监控管理的数据监控方法及系统

文档预览
中文文档 9 页 50 下载 1000 浏览 0 评论 0 收藏 3.0分
温馨提示:本文档共9页,可预览 3 页,如浏览全部内容或当前文档出现乱码,可开通会员下载原始文档
专利 一种基于综合监控管理的数据监控方法及系统 第 1 页 专利 一种基于综合监控管理的数据监控方法及系统 第 2 页 专利 一种基于综合监控管理的数据监控方法及系统 第 3 页
下载文档到电脑,方便使用
本文档由 SC 于 2024-02-24 00:46:27上传分享
友情链接
站内资源均来自网友分享或网络收集整理,若无意中侵犯到您的权利,敬请联系我们微信(点击查看客服),我们将及时删除相关资源。