申请/专利权人：西藏云通数字科技有限公司

申请日：2024-01-16

公开（公告）日：2024-04-16

公开（公告）号：CN117893294A

主分类号：G06Q30/08

分类号：G06Q30/08;G06Q10/047;G06Q30/0241;G06F30/28;G06F113/08;G06F119/14

优先权：

专利状态码：在审-公开

法律状态：2024.04.16#公开

摘要：本发明涉及低延迟数据处理技术领域，具体为一种用于竞价的分布式低延迟延时任务，包括以下步骤，基于ElasticJob，采用一致性哈希算法，对服务节点进行均匀分片，同时结合Cap定理，实施故障转移和副本一致性维护，进行动态节点加入和移除处理、分片数据的实时更新和同步，生成数据同步与更新方案。本发明中，通过基于ElasticJob和一致性哈希算法，结合Cap定理，确保各服务节点负载均衡，保障服务的可用性，通过以Redis为数据存储和缓存机制，优化任务存储方案，采用波分复用技术和负载均衡算法对数据中心间的通信进行优化，实现数据并行传输，提高了整体通信效率，引入滑动窗口算法和基于事件的窗口内数据处理模型，有效应对大规模数据流的处理需求。

主权项：1.一种用于竞价的分布式低延迟延时任务，其特征在于，包括以下步骤：基于ElasticJob，采用一致性哈希算法，对服务节点进行均匀分片，同时结合Cap定理，实施故障转移和副本一致性维护，进行动态节点加入和移除处理、分片数据的实时更新和同步，生成数据同步与更新方案；基于所述数据同步与更新方案，采用Redis作为数据存储和缓存机制，结合最近最少使用算法管理缓存数据，维护高频访问数据的快速访问能力，优化内存资源管理，生成优化的任务存储方案；基于所述优化的任务存储方案，采用波分复用技术和负载均衡算法，对数据中心间的通信进行优化，通过分配多种波长给对应数据流，进行数据的并行传输，生成数据传输策略；基于所述数据传输策略，采用滑动窗口算法处理实时数据流，同时应用数据流处理模型，在基于事件的窗口内处理数据，对数据进行排序和筛选，生成实时数据处理策略；基于所述实时数据处理策略，采用计算流体动力学模型和网络拓扑分析，模拟数据在网络中的流动路径，通过识别和分析数据流的行为，包括流量分布和潜在拥堵点，并进行优化，生成数据流动优化模型；基于所述数据流动优化模型，采用路径优化算法和冲突解决策略，对网络中的数据传输路径进行优化，通过计算最优路径和减少路径冲突，对数据流动进行优化调整，生成路径优化解决方案；基于所述路径优化解决方案，采用光子网络技术，包括光子编码和解码技术，对数据进行快速处理，结合光纤传输特性，优化数据在光纤网络中的传输速度，生成光子网络传输方案；基于所述光子网络传输方案，采用微服务架构模式和服务编排策略，将数据处理流程拆分成多个独立、轻量级的服务单元，通过服务间的通信协同工作，优化数据处理过程，生成微服务化任务处理流程。

全文数据：

权利要求：

百度查询： 西藏云通数字科技有限公司 一种用于竞价的分布式低延迟延时任务

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息，力求客观、公正，但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解，仅供参考使用，不能作为本公司承担任何法律责任的依据或者凭证。

阅读全文 双屏查看 官方信息 专利公告 收藏专利 下载PDF 下载WORD