全网唯一标准王
(19)中华 人民共和国 国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202111416242.5 (22)申请日 2021.11.25 (71)申请人 杭州笨马网络技 术有限公司 地址 310000 浙江省杭州市余杭区仓前街 道欧美金融城4幢3 507-3510室 (72)发明人 曹存凯  (74)专利代理 机构 杭州裕阳联合专利代理有限 公司 33289 代理人 高明翠 (51)Int.Cl. G06F 11/36(2006.01) G06N 20/00(2019.01) (54)发明名称 一种数据智能核 对的方法、 装置及设备 (57)摘要 本发明公开了一种数据智能核对的方法、 装 置及设备, 包括以下步骤: 根据机器学习对每个 TraceId对应的链路数据进行训练, 确定数据之 间的关联关系, 得到所述每个TraceId对应的链 路数据的核对规则; 获取待核对数据及对应的 TraceId; 根据所述对应的Trac eId从所述核对 规 则中选择合适的核对规则对所述待核对数据进 行核对, 若核对失败则报告异常。 该方法通过机 器学习训练核对规则, 比人工编写核对脚本投入 成本少, 且更全面, 更新更及时, 同时利用算法进 行测试可以及时发现问题。 权利要求书2页 说明书6页 附图4页 CN 114168458 A 2022.03.11 CN 114168458 A 1.一种数据智能核对的方法, 其特 征在于, 包括以下步骤: 根据机器学习对每个TraceId对应的链路数据进行训练, 确定数据之间的关联关系, 得 到所述每 个TraceId对应的链路数据的核对规则; 获取待核对数据及对应的TraceId; 根据所述对应的TraceId从所述核对规则中选择合适的核对规则对所述待核对数据进 行核对, 若 核对失败则报告异常。 2.根据权利要求1所述的一种数据智能核对的方法, 其特征在于, 所述根据机器学习 对 每个TraceId对应的链路数据进行训练, 确定数据之间的关联关系, 得到所述每个Tr aceId 对应的链路数据的核对规则包括: 获取样本数据与多个TraceId, 所述多个TraceId用来标记所述样本数据的调用链路; 根据所述多个TraceId对所述样本数据进行筛 选, 得到每 个TraceId相关的链路数据; 根据有监督学习 对所述链路数据分别进行训练, 得到所述链路数据中各数据之间的关 联关系, 确定所述每 个TraceId对应的链路数据的核对规则。 3.根据权利要求1所述的一种数据智能核对的方法, 其特征在于, 所述获取待核对数据 及对应的TraceId包括: 将待核对数据回流至离线表或监 听所述待核对数据库的变更消息, 并将数据落至离线 表。 4.根据权利要求1所述的一种数据智能核对的方法, 其特征在于, 所述获取待核对数据 及对应的TraceId还 包括: 当待核对数据运行时, 生成唯一的TraceId来标记所述待核对数据的调用链路, 并将所 述唯一的TraceId记录在数据库表中。 5.一种数据智能核对的装置, 其特 征在于, 包括: 训练模块, 用于根据机器学习对每个TraceId对应的链路数据进行训练, 确定数据之间 的关联关系, 得到所述每 个TraceId对应的链路数据的核对规则; 获取模块, 用于获取待 核对数据及对应的TraceId; 核对模块, 用于根据所述对应的TraceId从所述核对规则中选择合适的核对规则对所 述待核对数据进行核对, 若 核对失败则报告异常。 6.根据权利要求5所述的一种数据智能核对的装置, 其特 征在于, 所述训练模块包括: 取数单元, 用于获取样本数据与多个TraceId, 所述多个TraceId用来标记所述样本数 据的调用链路; 过滤单元, 用于根据所述多个TraceId对所述样本数据进行筛选, 得到每个TraceId相 关的链路数据; 生成单元, 用于根据有监督学习对所述链路数据分别进行训练, 得到所述链路数据中 各数据之间的关联关系, 确定所述每 个TraceId对应的链路数据的核对规则。 7.根据权利要求5所述的一种数据智能核对的装置, 其特 征在于, 所述获取模块包括: 获取子单元, 用于将待核对数据回流至离线表或监听所述待核对数据库的变更消息, 并将数据落至 离线表。 8.根据权利要求5所述的一种数据智能核对的装置, 其特征在于, 所述获取模块还包 括:权 利 要 求 书 1/2 页 2 CN 114168458 A 2记录单元, 用于当待核对数据 运行时, 生成唯一的TraceId来标记所述待核对数据的调 用链路, 并将所述唯一的TraceId记录在数据库表中。 9.一种电子设备, 其特征在于, 包括存储器和处理器, 所述存储器用于存储一条或多条 计算机指令, 其中, 所述一条或多条计算机指令被所述处理器执行以实现如权利要求1~4 中任一项所述的一种数据智能核对的方法。 10.一种存储有计算机程序的计算机可读存储介质, 其特征在于, 所述计算机程序使计 算机执行时实现如权利要求1~4中任一项所述的一种数据智能核对的方法。权 利 要 求 书 2/2 页 3 CN 114168458 A 3

.PDF文档 专利 一种数据智能核对的方法、装置及设备

文档预览
中文文档 13 页 50 下载 1000 浏览 0 评论 309 收藏 3.0分
温馨提示:本文档共13页,可预览 3 页,如浏览全部内容或当前文档出现乱码,可开通会员下载原始文档
专利 一种数据智能核对的方法、装置及设备 第 1 页 专利 一种数据智能核对的方法、装置及设备 第 2 页 专利 一种数据智能核对的方法、装置及设备 第 3 页
下载文档到电脑,方便使用
本文档由 人生无常 于 2024-03-19 01:20:11上传分享
友情链接
站内资源均来自网友分享或网络收集整理,若无意中侵犯到您的权利,敬请联系我们微信(点击查看客服),我们将及时删除相关资源。