平安科技(深圳)有限公司余伟获国家专利权
买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
龙图腾网获悉平安科技(深圳)有限公司申请的专利任务处理方法、装置、计算机设备及计算机可读存储介质获国家发明授权专利权,本发明授权专利权由国家知识产权局授予,授权公告号为:CN119127434B 。
龙图腾网通过国家知识产权局官网在2025-12-30发布的发明授权授权公告中获悉:该发明授权的专利申请号/专利号为:202411199899.4,技术领域涉及:G06F9/48;该发明授权任务处理方法、装置、计算机设备及计算机可读存储介质是由余伟;万书武设计研发完成,并于2024-08-28向国家知识产权局提交的专利申请。
本任务处理方法、装置、计算机设备及计算机可读存储介质在说明书摘要公布了:本申请提供一种任务处理方法、装置、计算机设备及计算机可读存储介质,该方法包括:接收Spark任务的任务处理信息,任务处理信息包括任务处理节点黑名单;根据任务处理信息确定处理Spark任务所需的多个第一任务处理节点;基于任务处理节点黑名单对各第一任务处理节点进行校验;将通过校验的第一任务处理节点确定为第二任务处理节点,并根据任务处理信息确定与第二任务处理节点对应的任务进程;基于第二任务处理节点执行任务进程。本申请提升了任务处理节点的调用灵活性及Spark任务的处理效率。
本发明授权任务处理方法、装置、计算机设备及计算机可读存储介质在权利要求书中公布了:1.一种任务处理方法,其特征在于,包括: 接收Spark任务的任务处理信息,所述任务处理信息包括任务处理节点黑名单; 根据所述任务处理信息确定处理所述Spark任务所需的多个第一任务处理节点,包括:基于Yarn集群的ResourceManager,根据所述任务处理信息确定处理所述Spark任务所需的多个第一任务处理节点,并将所述第一任务处理节点及所述任务处理节点黑名单传送至所述Yarn集群的NodeManager; 基于所述任务处理节点黑名单对各所述第一任务处理节点进行校验,包括:基于在所述NodeManager中生成的driver进程,在所述任务处理节点黑名单未包含当前校验的第一任务处理节点时,确定当前校验的第一任务处理节点通过校验;在所述任务处理节点黑名单包含当前校验的第一任务处理节点,则确定当前校验的第一任务处理节点未通过校验; 将通过校验的第一任务处理节点确定为第二任务处理节点:基于所述NodeManager,对未通过校验的第一任务处理节点进行删除处理,以将剩余的第一任务处理节点作为所述第二任务处理节点; 根据所述任务处理信息确定与所述第二任务处理节点对应的任务进程; 基于所述第二任务处理节点执行所述任务进程; 在存在所述任务进程无法通过所述第二任务处理节点处理的情况下,根据所述任务处理信息的处理情况确定第三任务处理节点,并根据所述任务处理节点黑名单对所述第三任务处理节点进行校验;在所述第三任务处理节点通过校验的情况下,基于所述第三任务处理节点处理所述第二任务处理节点无法处理的任务进程; 所述方法还包括:在Spark任务发起端设置任务处理节点黑名单,并将准备变更服务的任务处理节点写入任务处理节点黑名单中。
如需购买、转让、实施、许可或投资类似专利技术,可联系本专利的申请人或专利权人平安科技(深圳)有限公司,其通讯地址为:518057 广东省深圳市福田区福田街道福安社区益田路5033号平安金融中心23楼;或者联系龙图腾网官方客服,联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。
以上内容由龙图腾AI智能生成。
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。

皖公网安备 34010402703815号
请提出您的宝贵建议,有机会获取IP积分或其他奖励