奇秦科技(北京)股份有限公司王小明获国家专利权
买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
龙图腾网获悉奇秦科技(北京)股份有限公司申请的专利一种基于Flink的智能数据流处理系统及其实现方法获国家发明授权专利权,本发明授权专利权由国家知识产权局授予,授权公告号为:CN120803623B 。
龙图腾网通过国家知识产权局官网在2026-01-06发布的发明授权授权公告中获悉:该发明授权的专利申请号/专利号为:202511300968.0,技术领域涉及:G06F9/46;该发明授权一种基于Flink的智能数据流处理系统及其实现方法是由王小明;王利强;林杰;侯斌峰设计研发完成,并于2025-09-12向国家知识产权局提交的专利申请。
本一种基于Flink的智能数据流处理系统及其实现方法在说明书摘要公布了:本发明公开了一种基于Flink的智能数据流处理系统及其实现方法,属于分布式流式数据处理技术领域,包括:数据源接入层统一接入多源数据;实体监听层基于JPA非侵入式捕获业务实体变更,生成标准化消息体并异步投递至双通道;统一事件模型层将其映射为标准化事件并扩展;Flink流处理引擎层用于复杂事件处理、状态管理、窗口计算,支持声明式流水线定义和动态构建;异常检测层进行多维度异常检测;分布式任务调度层依据DAG模型调度任务,通过热点分裂与状态迁移实现负载均衡;结果存储与可视化层采用冷热分离策略存储数据,提供动态可视化界面。本发明显著提升数据处理的实时性、一致性和智能化水平,降低开发与维护成本。
本发明授权一种基于Flink的智能数据流处理系统及其实现方法在权利要求书中公布了:1.一种基于Flink的智能数据流处理系统,其特征在于,包括: 数据源接入层,配置可插拔连接器用于连接多个种类数据源,实现数据统一接入与标准化转换; 实体监听层,基于JPA实体监听机制非侵入式自动捕获业务实体变更事件并生成标准化消息体,异步投递至双通道;其中,JPA为Java持久化应用程序接口; 所述实体监听层基于JPA生命周期注解捕获业务实体变更事件后,触发递归延迟加载算法,通过HibernateAPI检测未初始化字段,以深度优先策略递归加载关联对象并消除循环引用,同步生成变更前快照与变更后快照后进行字段过滤;基于业务实体主键、业务实体类名与SnowFlake算法获得全局TraceId;基于全局TraceId与进行字段过滤后的变更前快照和变更后快照构建标准化消息体,异步投递至双通道,其中,全局TraceId为分布式系统中追踪请求流程的唯一标识符,SnowFlake算法为雪花算法,Hibernate为Java对象关系映射框架,API为应用程序接口; 统一事件模型层,用于根据所述数据源接入层映射的标准化消息体生成标准化事件并进行扩展后路由至Flink流处理引擎层; Flink流处理引擎层,用于复杂事件处理、状态管理、窗口计算、流表转换与声明式的流水线定义和动态构建,Flink为ApacheFlink流处理框架; 所述Flink流处理引擎层包括流水线构建单元、事件模式检测单元、状态计算单元、数据增强单元与容错单元; 所述流水线构建单元,用于解析DSL配置,触发FlowBuilder接口动态构建JobGraph,DSL配置为Flink作业的配置,FlowBuilder接口为流编排接口,JobGraph为作业拓扑图; 所述事件模式检测单元,用于通过CEP引擎扫描事件流,匹配预设的复杂模式,触发告警或聚合操作,其中,CEP引擎为复杂事件处理引擎; 所述状态计算单元,用于执行窗口聚合时,调用RocksDB状态后端存储中间结果,同步激活TTL清理过期状态;其中,TTL为生存时间机制;RocksDB为嵌入式键值存储数据库; 所述数据增强单元,用于关联外部维表扩展事件属性; 所述容错单元,通过基于Checkpoint和Savepoint的容错机制,在故障恢复时确保数据一致性; 其中,Checkpoint和Savepoint均为Flink流处理框架中的机制,Checkpoint为Flink中定期自动保存流处理作业的状态,Savepoint为Flink中手动触发保存流处理作业的状态; 异常检测层,用于基于规则引擎、统计模型与机器学习算法对数据流进行异常检测; 分布式任务调度层,基于DAG依赖模型调度任务,通过热点分裂与状态迁移实现负载均衡;其中,DAG为有向无环图; 结果存储与可视化层,用于采用冷热分离策略存储数据,提供动态可视化界面。
如需购买、转让、实施、许可或投资类似专利技术,可联系本专利的申请人或专利权人奇秦科技(北京)股份有限公司,其通讯地址为:100193 北京市海淀区西北旺东路10号院东区22号楼4层101;或者联系龙图腾网官方客服,联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。
以上内容由龙图腾AI智能生成。
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。

皖公网安备 34010402703815号
请提出您的宝贵建议,有机会获取IP积分或其他奖励