北京科杰科技有限公司高经郡获国家专利权
买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！
龙图腾网获悉北京科杰科技有限公司申请的专利基于Flink的非结构化数据同步方法及系统获国家发明授权专利权，本发明授权专利权由国家知识产权局授予，授权公告号为：CN120407294B 。
龙图腾网通过国家知识产权局官网在2025-09-16发布的发明授权授权公告中获悉：该发明授权的专利申请号/专利号为：202510907246.5，技术领域涉及：G06F11/14；该发明授权基于Flink的非结构化数据同步方法及系统是由高经郡;周波设计研发完成，并于2025-07-02向国家知识产权局提交的专利申请。
本基于Flink的非结构化数据同步方法及系统在说明书摘要公布了：本发明提供一种基于Flink的非结构化数据同步方法及系统，涉及大数据处理技术领域，包括：对非结构化数据分片处理，基于访问特征评分实现数据在堆内存层和RocksDB层的分层存储，结合深度强化学习进行数据分区优化，并通过计算反压指标值动态调整并行度参数和资源配额，采用检查点快照机制保证数据同步可靠性，有效提高了数据处理效率和系统吞吐量。
本发明授权基于Flink的非结构化数据同步方法及系统在权利要求书中公布了：1.基于Flink的非结构化数据同步方法，其特征在于，包括： 获取待处理的非结构化数据的存储路径并对非结构化数据进行分片处理，得到分片数据块； 基于所述分片数据块的访问时间间隔和访问次数计算特征评分并生成特征评分表，将特征评分大于第一阈值的分片数据块写入堆内存层，其他分片数据块写入RocksDB层，将堆内存层中的分片数据块划分为多个数据分区并生成初始数据分区表，采集数据访问时延并结合深度强化学习计算时延预测值，执行梯度迭代生成第一优化阈值并触发数据迁移得到数据分区表； 根据预设缓冲区大小，基于数据分区表读取非结构化数据并将读取得到的非结构化数据构造为元数据区和数据载荷区的二进制数据； 计算所述二进制数据的数据量与处理时限比值作为处理负载系数并划分微批次，计算数据处理速率与积压数据量的比值作为反压指标值，当所述反压指标值超过预先设置的第二阈值时，执行群体迭代运算得到最大吞吐量对应的并行度参数和资源配额并更新至处理算子，根据加权轮询分配执行时间片，生成微批次调度序列并对所述微批次执行数据处理； 保存检查点快照，发生故障时根据检查点快照恢复数据同步状态。
如需购买、转让、实施、许可或投资类似专利技术，可联系本专利的申请人或专利权人北京科杰科技有限公司，其通讯地址为：100096 北京市海淀区东升科技园北街6号院10号楼11层101；或者联系龙图腾网官方客服，联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。
以上内容由AI智能生成
免责声明
1、本报告根据公开、合法渠道获得相关数据和信息，力求客观、公正，但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解，仅供参考使用，不能作为本公司承担任何法律责任的依据或者凭证。
1、本报告根据公开、合法渠道获得相关数据和信息，力求客观、公正，但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解，仅供参考使用，不能作为本公司承担任何法律责任的依据或者凭证。
开放平台
担保交易
惠及多方
会员特惠
专属平台
适合多方
数据共享
功能齐全
皖公网安备 34010402703815号