买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

龙图腾网获悉北京科杰科技有限公司申请的专利一种智能数据校验方法、装置及相关设备获国家发明授权专利权，本发明授权专利权由国家知识产权局授予，授权公告号为：CN120930190B 。

龙图腾网通过国家知识产权局官网在2026-01-27发布的发明授权授权公告中获悉：该发明授权的专利申请号/专利号为：202511457008.5，技术领域涉及：G06F21/64；该发明授权一种智能数据校验方法、装置及相关设备是由王文文;陶泽跃设计研发完成，并于2025-10-13向国家知识产权局提交的专利申请。

本一种智能数据校验方法、装置及相关设备在说明书摘要公布了：本申请公开一种智能数据校验方法、装置及相关设备，该方法包括：获取目标Hive表的字段类型、分区键、分区数据大小；基于规则引擎、目标Hive表的字段类型生成字段过滤表达式；基于目标Hive表的分区键生成级联校验条件；基于字段过滤表达式、级联校验条件生成校验规则；基于分布式文件系统上的存储块的存储空间，及各个分区数据的大小，对各个分区数据分片；分别对各分片数据进行校验得到目标全局校验码。本申请中，在对迁移前后的Hive数据校验时，通过设定字段过滤表达式，过滤掉Hive表中的非标量字段，提高校验时对微小误差的容忍度；执行校验时，通过对各个分区数据进行分片，并基于分布式集群的多个计算节点并行对各个分片数据进行校验，能够提高校验效率。

本发明授权一种智能数据校验方法、装置及相关设备在权利要求书中公布了：1.一种智能数据校验方法，包括： 获取目标Hive表的元数据，所述元数据包括字段类型、分区键、分区数据大小； 基于预设规则引擎和所述目标Hive表的字段类型，生成字段过滤表达式，所述字段过滤表达式用于过滤所述目标Hive表中的非标量字段； 基于所述目标Hive表的分区键，生成级联校验条件； 基于所述字段过滤表达式和所述级联校验条件生成校验规则； 基于所述目标Hive表对应的分布式文件系统上的存储块的存储空间，以及所述目标Hive表的各个分区数据的大小，对所述目标Hive表的各个分区数据进行分片，得到多个分片数据； 基于所述校验规则，分别对各所述分片数据进行校验，得到目标全局校验码； 所述元数据还包括字段数量、字段顺序，在生成字段过滤表达式之前，所述智能数据校验方法还包括： 确定所述目标Hive表的字段数量、字段顺序、字段类型、分区键，与源Hive表的字段数量、字段顺序、字段类型、分区键是否一致； 若否，则结束校验，并返回第一校验信息，所述第一校验信息用于表明所述目标Hive表的字段数量、字段顺序、字段类型、分区键，与源Hive表的字段数量、字段顺序、字段类型、分区键不一致的部分； 在基于所述校验规则，分别对各所述分片数据进行校验之前，所述智能数据校验方法还包括： 判断所述目标Hive表对应的业务数据的总大小，与所述源Hive表对应的业务数据的总大小是否一致； 若否，则结束校验，并返回第二校验信息，所述第二校验信息用于表明所述目标Hive表对应的业务数据的总大小，与所述源Hive表对应的业务数据的总大小不一致； 若一致，则基于所述分区键确定抽检分区，并基于所述校验规则对所述抽检分区中预设比例大小的业务数据进行抽检，得到目标抽检校验码； 确定所述目标抽检校验码和源抽检校验码是否一致，其中，所述源抽检校验码基于所述源Hive表中与所述抽检分区对应分区的业务数据及校验规则抽检得到； 若否，则结束校验，并返回第三校验信息，所述第三校验信息用于表明所述目标抽检校验码和源抽检校验码不一致； 所述基于所述目标Hive表对应的分布式文件系统上的存储块的存储空间，以及所述目标Hive表的各个分区数据的大小，对所述目标Hive表的各个分区数据进行分片，得到多个分片数据，包括： 确定每个分区数据中所包含的数据文件的大小； 将同一个分区中的各个数据文件，按照所述存储块的存储空间大小进行拆分和或合并，得到多个分片数据。

如需购买、转让、实施、许可或投资类似专利技术，可联系本专利的申请人或专利权人北京科杰科技有限公司，其通讯地址为：100096 北京市海淀区东升科技园北街6号院10号楼11层101；或者联系龙图腾网官方客服，联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。

以上内容由龙图腾AI智能生成。