北京奇艺世纪科技有限公司李恒获国家专利权
买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
龙图腾网获悉北京奇艺世纪科技有限公司申请的专利一种实时数据离线存储方法、装置及电子设备获国家发明授权专利权,本发明授权专利权由国家知识产权局授予,授权公告号为:CN114253969B 。
龙图腾网通过国家知识产权局官网在2026-03-10发布的发明授权授权公告中获悉:该发明授权的专利申请号/专利号为:202111464623.0,技术领域涉及:G06F16/22;该发明授权一种实时数据离线存储方法、装置及电子设备是由李恒设计研发完成,并于2021-12-03向国家知识产权局提交的专利申请。
本一种实时数据离线存储方法、装置及电子设备在说明书摘要公布了:本发明实施例提供了一种实时数据离线存储方法、装置及电子设备,涉及到数据处理技术领域,上述方法包括:获取待存储的实时数据;根据所述实时数据的属性参数,确定实时数据的数据类型,得到目标数据类型;基于预先设置的数据类型与离线表的对应关系,确定目标数据类型对应的目标离线表;将实时数据存储到目标离线表中,能够更完善地对实时数据进行离线存储。
本发明授权一种实时数据离线存储方法、装置及电子设备在权利要求书中公布了:1.一种实时数据离线存储方法,其特征在于,所述方法包括: 获取待存储的实时数据; 根据所述实时数据的属性参数,确定所述实时数据的数据类型,得到目标数据类型,其中,所述实时数据的属性参数包括所述实时数据的访问频次、数据时效性及访问反映时间中的至少一种,所述数据类型包括冷数据、热数据及温数据; 基于预先设置的数据类型与离线表的对应关系,确定所述目标数据类型对应的目标离线表,其中,所述离线表是用于对实时数据进行离线存储的数据库,所述对应关系包括冷数据对应数据仓库中的离线表,温数据对应数据湖中的离线表,热数据对应查询引擎中的离线表,所述数据仓库为一个可以反映数据历史变化的集成性的数据库,所述查询引擎为集搜索、分析、存储数据于一体的开源分布式查询引擎,所述数据湖为一个以原始格式存储数据的数据存储库或系统,所述目标离线表中包括多个数据分区,各数据分区各自对应相应的时间段; 获取当前的数据写入模式及所述实时数据的有效写入时刻,其中,所述数据写入模式包括系统时间写入模式、严格事件时间写入模式及补录事件时间写入模式,所述实时数据的有效写入时刻为与数据写入模式相对应的所述实时数据的生成时刻和或接收到所述实时数据的接收时刻; 在当前的数据写入模式为补录事件时间写入模式的情况下,计算所述实时数据的生成时刻与当前时刻的时间差值;在所述时间差值大于预设时间阈值的情况下,确定所述实时数据的接收时刻所在的时间段,得到目标时间段;并将所述目标离线表中所述目标时间段对应的数据分区作为所述实时数据对应的目标数据分区;在所述时间差值不大于预设时间阈值的情况下,确定所述实时数据的生成时刻所在的时间段,得到目标时间段;并将所述目标离线表中所述目标时间段对应的数据分区作为所述实时数据对应的目标数据分区; 在当前的数据写入模式为系统时间写入模式的情况下,所述实时数据的有效写入时刻为接收到所述实时数据的接收时刻;确定所述实时数据的接收时刻所在的时间段,得到目标时间段;将所述目标离线表中所述目标时间段对应的数据分区作为所述实时数据对应的目标数据分区; 在当前的数据写入模式为严格事件时间写入模式的情况下,所述实时数据的有效写入时刻为所述实时数据的生成时刻;确定所述实时数据的生成时刻所在的时间段,得到目标时间段;将所述目标离线表中所述目标时间段对应的数据分区作为所述实时数据对应的目标数据分区; 将所述实时数据存储到所述目标数据分区中。
如需购买、转让、实施、许可或投资类似专利技术,可联系本专利的申请人或专利权人北京奇艺世纪科技有限公司,其通讯地址为:100080 北京市海淀区海淀北一街2号鸿城拓展大厦10、11层;或者联系龙图腾网官方客服,联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。
以上内容由龙图腾AI智能生成。
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。

皖公网安备 34010402703815号
请提出您的宝贵建议,有机会获取IP积分或其他奖励