申请/专利权人：厦门市民数据服务股份有限公司

申请日：2023-12-29

公开（公告）日：2024-04-19

公开（公告）号：CN117909066A

主分类号：G06F9/50

分类号：G06F9/50

优先权：

专利状态码：在审-实质审查的生效

法律状态：2024.05.07#实质审查的生效;2024.04.19#公开

摘要：本发明涉及数据处理技术领域，提供了一种基于流式查询的实时作业分发方法及系统，本发明通过融合JDBC流式查询、多线程异步生产消费以及动态缓存管理技术，从根本上摒弃了对传统重型中间件的依赖，这种创新的系统能够被封装成一个轻便的jar包，极大地简化了其在不同项目中的集成与使用过程，从而简化了整个工作流程，并加速了开发的上手过程，其中采用多线程异步处理方法，使数据生产和消费过程并行进行，有效平衡系统负载，显著提高数据处理的效率，并在多线程异步生产消费模式下，设有中断及唤醒机制，有助于根据系统的当前负载动态地调整资源分配，从而保证系统即使在极端情况下也能保持高效和稳定的运行。

主权项：1.一种基于流式查询的实时作业分发方法，其特征在于，包括：多线程异步处理：在配置系统参数时，根据数据处理需求及硬件资源，设置合适的线程数量及队列容器数，使生产者线程和消费者线程并行，实现对多个数据流的同时处理；所述生产者线程将新任务放入任务存储队列，所述消费者线程从所述任务存储队列中获取任务并执行；线程唤醒机制：若队列为空时所述消费者线程进入阻塞状态，当队列中有新任务加入，处于阻塞状态的所述消费者线程中的一个或多个将被唤醒；线程中断机制：在配置所述系统参数时，设定最大线程运行时长，若超过所述最大线程运行时长，所述线程强制关闭。

全文数据：

权利要求：

百度查询： 厦门市民数据服务股份有限公司 一种基于流式查询的实时作业分发方法及系统

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息，力求客观、公正，但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解，仅供参考使用，不能作为本公司承担任何法律责任的依据或者凭证。

阅读全文 双屏查看 官方信息 专利公告 收藏专利 下载PDF 下载WORD