申请/专利权人:河北幸福消费金融股份有限公司
申请日:2022-11-17
公开(公告)日:2023-03-17
公开(公告)号:CN115809157A
主分类号:G06F9/54
分类号:G06F9/54;G06F16/27
优先权:
专利状态码:在审-实质审查的生效
法律状态:2023.04.04#实质审查的生效;2023.03.17#公开
摘要:本发明实施方式提供一种数据批处理系统,涉及数据处理领域。所述系统包括:分库模块,用于按数据所属的产品号和所属的ID区间对数据进行SET化分库,将数据分到多个SET数据库中;任务分发模块,用于轮询所述多个SET数据库,为所述多个SET数据库分别创建分片任务,并通过消息队列依次发布所述分片任务;任务消费模块,用于依次处理所发布的分片任务。通过本发明实施方式提供的数据批处理系统进行数据批处理,可以缩短批处理时长,提高批处理效率。
主权项:1.一种数据批处理系统,其特征在于,所述系统包括:分库模块,用于按数据所属的产品号和所属的ID区间对数据进行SET化分库,将数据分到多个SET数据库中;任务分发模块,用于轮询所述多个SET数据库,为所述多个SET数据库分别创建分片任务,并通过消息队列依次发布所述分片任务;任务消费模块,用于依次处理所发布的分片任务。
全文数据:
权利要求:
百度查询: 河北幸福消费金融股份有限公司 数据批处理系统
免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。