买专利,只认龙图腾
首页 专利交易 科技果 科技人才 科技服务 商标交易 会员权益 IP管家助手 需求市场 关于龙图腾
 /  免费注册
到顶部 到底部
清空 搜索

【发明授权】拉链表数据加载方法、装置和电子设备_中银金融科技有限公司_202310513473.0 

申请/专利权人:中银金融科技有限公司

申请日:2023-05-08

公开(公告)日:2024-04-09

公开(公告)号:CN116719971B

主分类号:G06F16/901

分类号:G06F16/901;G06F16/23

优先权:

专利状态码:有效-授权

法律状态:2024.04.09#授权;2023.09.26#实质审查的生效;2023.09.08#公开

摘要:本发明提供一种拉链表加载方法、装置和电子设备,属于计算机技术领域。其中,拉链表数据加载方法包括:基于待加工成拉链表的源表建立初始拉链表,所述初始拉链表的预设表结构至少包括:跑批日期、拉链起始日期和拉链终止日期;确定所述初始拉链表不为空,基于当前跑批日期和所述初始拉链表的最大跑批日期,按日将准实时日增量数据插入所述初始拉链表,直至所述初始拉链表中最大跑批日期更新为所述当前跑批日期,得到第一拉链表,本发明基于初始拉链表中预设表结构的信息,实现对初始拉链表的准实时加载、耗时较短且成本较低。

主权项:1.一种拉链表数据加载方法,其特征在于,包括:基于待加工成拉链表的源表建立初始拉链表,所述初始拉链表的预设表结构至少包括:跑批日期、拉链起始日期和拉链终止日期;确定所述初始拉链表不为空,基于当前跑批日期和所述初始拉链表的最大跑批日期,按日将准实时日增量数据插入所述初始拉链表,直至所述初始拉链表中最大跑批日期更新为所述当前跑批日期,得到第一拉链表;所述方法还包括:基于所述待加工成拉链表的源表,确定配置表,所述配置表的字段至少包括:表名、主键字段、数据抽取时间和日常维护信息;所述基于所述初始拉链表的最大跑批日期和当前跑批日期,按日将准实时日增量数据插入所述初始拉链表,直至所述初始拉链表中最大跑批日期更新为当前跑批日期,得到第一拉链表之前,还包括:基于所述配置表,生成所述待加工成拉链表的源表对应的日增量表、日增量新增表和日增量更新表;通过查询预先建立的拉链表加载批次日志表,确定最近一次跑批没有未正常结束的批次;所述基于所述初始拉链表的最大跑批日期和当前跑批日期,按日将准实时日增量数据插入所述初始拉链表,直至所述初始拉链表中最大跑批日期更新为当前跑批日期,得到第一拉链表,包括:基于所述初始拉链表的最大跑批日期和当前跑批日期,确定未处理日期,所述未处理日期包括从所述最大跑批日期开始直至当前跑批日期中的每一个日期;对于所述未处理日期,按日执行以下步骤:获取当前未处理日期对应的准实时日增量数据,将所述准实时日增量数据插入到所述日增量表;基于所述日增量表和所述初始拉链表,将所述准实时日增量数据中的更新数据插入所述日增量更新表,得到第一日增量更新表,并将所述增量数据中的新增数据插入所述日增量新增表,得到第一日增量新增表;根据所述第一日增量更新表,更新所述初始拉链表中相应数据的拉链终止日期为时间戳字段的值的前一天,得到更新后的初始拉链表;更新所述第一日增量更新表和所述第一日增量新增表的跑批日期、拉链起始日期和拉链终止日期;将所述第一日增量更新表和所述第一日增量新增表的所有数据插入所述更新后的初始拉链表,并删除所述更新后的初始拉链表中拉链起始日期大于拉链终止日期的数据;将所述当前未处理日期更新为下一日。

全文数据:

权利要求:

百度查询: 中银金融科技有限公司 拉链表数据加载方法、装置和电子设备

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。