申请/专利权人：天翼云科技有限公司

申请日：2023-12-13

公开（公告）日：2024-04-09

公开（公告）号：CN117857384A

主分类号：H04L43/04

分类号：H04L43/04;H04L43/026;H04L43/0817;H04L41/0677;H04L41/069;G06F11/30

优先权：

专利状态码：在审-实质审查的生效

法律状态：2024.04.26#实质审查的生效;2024.04.09#公开

摘要：本发明公开了一种kafka集成链路的通用监控方法及相关设备，计算机技术领域，其方法包括明确kafka生产端的日志记录数据结构、对每个应用系统的日志、构建kafka集成链路的两类通用监控黄金指标、构建kafka传输日志监控模型、构建kafka告警阈值与告警规则和构建kafka监控分析模型的步骤，其相关设备包括包括监控装置和电子设备，所述监控装置还包括：指标建模单元、数据储存单元、监控告警单元和统计分析单元，所述电子设备包括处理器、总线、可读存储介质和存储器。与现有技术相比，该方法的设计kafka日志的统一数据结构与字段定义，将与kafka交互的应用系统相关信息也进行统一纳管，更具创造性以及实用性，并使得该方法的适用范围极为广阔。

主权项：1.一种kafka集成链路的通用监控方法，包括以下步骤:S1:明确kafka生产端的日志记录数据结构，在数据成功推送到kafka之后，进行日志记录；S2：对每个应用系统的日志，明确其数据源，对该数据源进行监控，获得数据源监控的增量日志；S3:构建kafka集成链路的两类通用监控黄金指标：kafka延时类指标与kafka待处理类指标；S4:构建kafka传输日志监控模型，按topic对生产与消费的每条记录进行逐行对比与监控；S5:构建kafka告警阈值与告警规则，判断上述步骤中的分析结果是否满足告警规则；如果满足，则生成告警通知，并按规则发送到相应的目标地址；S6:构建kafka监控分析模型，通过对kafka延时类指标与kafka待处理消息类指标的时序分析，结合kafka消息总量的变化趋势，分别对kafka生产端，kafka消费端与kafka整体，进行topic级，消息链路级，与应用系统级的性能分析，构建kafka监控数据管理规则，将监控结果与触发的告警信息进行记录。

全文数据：

权利要求：

百度查询： 天翼云科技有限公司 一种kafka集成链路的通用监控方法及相关设备

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息，力求客观、公正，但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解，仅供参考使用，不能作为本公司承担任何法律责任的依据或者凭证。

阅读全文 双屏查看 官方信息 专利公告 收藏专利 下载PDF 下载WORD