申请/专利权人：北京量子之歌科技有限公司

申请日：2023-11-14

公开（公告）日：2024-03-19

公开（公告）号：CN117729247A

主分类号：H04L67/2871

分类号：H04L67/2871;H04L67/141;H04L67/30

优先权：

专利状态码：在审-实质审查的生效

法律状态：2024.04.05#实质审查的生效;2024.03.19#公开

摘要：本说明书涉及流数据处理技术领域，提供了一种基于Flink的分布式数据流持久化方法、装置及设备，该方法包括：从Flink配置文件中获取数据源配置信息、数据转换配置信息和输出算子配置信息；使Flink连接器与所述源配置信息中作为数据源的消息中间件建立连接；所述消息中间件用于汇聚多个不同的消息生产者生产的业务消息；根据所述数据转换配置信息中的转换策略，将从所述消息中间件取出的业务消息转换为目标数据流；根据所述输出算子配置信息中的输出策略，将所述目标数据流持久化至对应的数据库表中。本说明书实施例可以提高Flink流处理的通用性，降低Flink流处理的开发工作量和开发效率。

主权项：1.一种基于Flink的分布式数据流持久化方法，其特征在于，包括：从Flink配置文件中获取数据源配置信息、数据转换配置信息和输出算子配置信息；使Flink连接器与所述源配置信息中作为数据源的消息中间件建立连接；所述消息中间件用于汇聚多个不同的消息生产者生产的业务消息；根据所述数据转换配置信息中的转换策略，将从所述消息中间件取出的业务消息转换为目标数据流；根据所述输出算子配置信息中的输出策略，将所述目标数据流持久化至对应的数据库表中。

全文数据：

权利要求：

百度查询： 北京量子之歌科技有限公司 基于Flink的分布式数据流持久化方法、装置及设备

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息，力求客观、公正，但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解，仅供参考使用，不能作为本公司承担任何法律责任的依据或者凭证。

阅读全文 双屏查看 官方信息 专利公告 收藏专利 下载PDF 下载WORD