买专利,只认龙图腾
首页 专利交易 科技果 科技人才 科技服务 商标交易 会员权益 IP管家助手 需求市场 关于龙图腾
 /  免费注册
到顶部 到底部
清空 搜索

【发明公布】一种基于clickhouse和java实现数据汇聚的方法和装置_武汉绿色网络信息服务有限责任公司_202311779337.2 

申请/专利权人:武汉绿色网络信息服务有限责任公司

申请日:2023-12-22

公开(公告)日:2024-03-29

公开(公告)号:CN117785922A

主分类号:G06F16/2453

分类号:G06F16/2453;G06F16/22

优先权:

专利状态码:在审-实质审查的生效

法律状态:2024.04.16#实质审查的生效;2024.03.29#公开

摘要:本发明涉及数据库技术领域,提供了一种基于clickhouse和java实现数据汇聚的方法和装置。利用生成物化视图数据库操作指令,并在相应的物化视图数据库操作指令中添加静态特征项和或累加项执行代码从而得到第一指标生成程序指令;利用java程序生成相应特殊结果项的分析代码,并存储为第二指标生成类;得到所述分析代码定时执行的分析周期;各自执行进程,从而对于原始数据的原始详单表进行处理。本发明使用物化视图的时候能将指标写入表中的延迟降低到最低,并结合java定时任务弥补了指标表中物化视图无法完成的其他指标项的生成。

主权项:1.一种基于clickhouse和java实现数据汇聚的方法,其特征在于,方法包括:分析作为原始数据的原始详单表结构和作为查询对象的指标表结构,确定指标表中可以通过原始详单表直接获取的静态特征项和或累加项,以及需要通过累积预设时长原始详单表,进一步分析得到的特殊结果项;利用clickhouse生成物化视图数据库操作指令,并在相应的物化视图数据库操作指令中添加静态特征项和或累加项执行代码从而得到第一指标生成程序指令;利用java程序生成相应特殊结果项的分析代码,并存储为第二指标生成类;综合分析代码执行所述预设时长累积下来原始详单表所对应的分析,得到特殊结果项所需分析时长,以及来自需求侧的查询延时阈值,得到所述分析代码定时执行的分析周期;通过运行所述第一指标生成程序指令和第二指标生成类,得到各自执行进程,从而对于原始数据的原始详单表进行处理,分别得到原始详单表中的静态特征项和或累加项,以及特殊结果项并存储到目标指标表中。

全文数据:

权利要求:

百度查询: 武汉绿色网络信息服务有限责任公司 一种基于clickhouse和java实现数据汇聚的方法和装置

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。