浙江金惠科技有限公司杨波获国家专利权
买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
龙图腾网获悉浙江金惠科技有限公司申请的专利多线程数据缓存读写并行高性能数据抽取方法及系统获国家发明授权专利权,本发明授权专利权由国家知识产权局授予,授权公告号为:CN119088863B 。
龙图腾网通过国家知识产权局官网在2025-10-17发布的发明授权授权公告中获悉:该发明授权的专利申请号/专利号为:202411042525.1,技术领域涉及:G06F16/25;该发明授权多线程数据缓存读写并行高性能数据抽取方法及系统是由杨波;薛卫军;夏骏峰;汤秀燕设计研发完成,并于2024-07-31向国家知识产权局提交的专利申请。
本多线程数据缓存读写并行高性能数据抽取方法及系统在说明书摘要公布了:本发明属于数据抽取技术领域,公开了一种多线程数据缓存读写并行高性能数据抽取方法及系统。方法包括建立抽取计划,并针对每一个抽取计划建立一个或多个抽取任务;对抽取计划中的每一个抽取任务设定为抽取前执行或抽取后执行;触发一个已建立的抽取计划执行;根据CPU核数计算并行最大任务数,基于并行最大任务数启动已触发的抽取计划中的抽取任务;监控已启动的抽取任务,若抽取任务中的读线程连续等待写入缓存次数大于等待阈值,同时空闲CPU核数不为零,则开启该抽取任务新的一个写线程,对读线程连续等待写入缓存次数清零,并持续监控直至抽取任务完成。本发明实现高性能、较低成本、集中式、易部署实施的数据抽取。
本发明授权多线程数据缓存读写并行高性能数据抽取方法及系统在权利要求书中公布了:1.一种多线程数据缓存读写并行高性能数据抽取方法,其特征在于,所述多线程数据缓存读写并行高性能数据抽取方法,包括: 建立抽取计划,并针对每一个抽取计划建立一个或多个抽取任务; 对抽取计划中的每一个抽取任务设定为抽取前执行或抽取后执行; 触发一个已建立的抽取计划执行; 根据CPU核数计算并行最大任务数,基于并行最大任务数启动已触发的抽取计划中的抽取任务,每个抽取任务初始开启1个读线程和N个写线程; 监控已启动的抽取任务,若抽取任务中的读线程连续等待写入缓存次数大于等待阈值,同时空闲CPU核数不为零,则开启该抽取任务新的一个写线程,对读线程连续等待写入缓存次数清零,并持续监控直至抽取任务完成; 其中,所述读线程按数据条数对待读取数据进行分片,判断是否满足向内存缓存中写入数据分片;若满足,则缓存数据分片,此时总缓存分片计数、目标表缓存分片计数各加1;否则读线程等待,读线程连续等待写入缓存次数加1;并且所述判断是否满足向内存缓存中写入数据分片,包括:当总缓存分片计数未达到设定的最大缓存分片总数DM1,同时目标表缓存分片计数未达到设定的单表最大缓存分片数DM2时,判断为满足;否则判断为不满足; 所述写线程消费内存缓存中的数据分片,此时总缓存分片计数、目标表缓存分片计数各减1。
如需购买、转让、实施、许可或投资类似专利技术,可联系本专利的申请人或专利权人浙江金惠科技有限公司,其通讯地址为:310010 浙江省杭州市滨江区长河街道江汉路1785号网新双城大厦4幢2101-7室;或者联系龙图腾网官方客服,联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。
以上内容由龙图腾AI智能生成。
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。

皖公网安备 34010402703815号
请提出您的宝贵建议,有机会获取IP积分或其他奖励