申请/专利权人:平安消费金融有限公司
申请日:2020-12-03
公开(公告)日:2024-04-09
公开(公告)号:CN112395296B
主分类号:G06F16/22
分类号:G06F16/22;G06F16/23;G06F16/2457
优先权:
专利状态码:有效-授权
法律状态:2024.04.09#授权;2021.11.09#实质审查的生效;2021.02.23#公开
摘要:本发明公开了一种大数据归档方法、装置、设备及存储介质,首先获取归档策略和归档表,然后基于归档策略和归档表,创建对应的分区表,当检测到归档表的数据发生改变时,查找到发生改变的数据对应的目标分区表,再根据目标分区表,捕获发生改变的数据,将发生改变的数据发送至少一个发送队列中,之后逐一将各发送队列中的数据发送至大数据的存储层中的目标表中,最后基于归档策略,对源数据库中的归档表进行删除。与现有技术相比,本发明实施例通过自动将归档表中的发生改变数据发送至大数据的存储层中的目标表中,实现归档表与目标表的数据同步,从而根据用户的需求,自动进行数据的归档,无要人工手动操作数据的归档,提高归档效率及可靠性。
主权项:1.一种大数据归档方法,其特征在于,包括:获取归档策略和与所述归档策略相应的归档表;基于所述归档策略和归档表,创建对应的分区表;当检测到所述归档表的数据发生改变时,查找到发生改变的数据对应的目标分区表;根据所述目标分区表,捕获所述发生改变的数据;将所述发生改变的数据发送至少一个发送队列中;逐一将各发送队列中的数据发送至大数据的存储层中的目标表中;基于所述归档策略,对源数据库中的所述归档表进行删除;所述逐一将各发送队列中的数据发送至大数据的存储层中的目标表中之后,包括:获取所述归档表中发生改变的数据与所述目标表中的数据之间的映射关系;基于所述映射关系,对所述目标表中的数据进行校验处理。
全文数据:
权利要求:
百度查询: 平安消费金融有限公司 一种大数据归档方法、装置、设备及存储介质
免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。