首页 专利交易 科技果 科技人才 科技服务 商标交易 会员权益 IP管家助手 需求市场 关于龙图腾
 /  免费注册
到顶部 到底部
清空 搜索

【发明公布】时序数据存储引擎的乱序处理方法及系统_上海沄熹科技有限公司_202310096745.1 

申请/专利权人:上海沄熹科技有限公司

申请日:2023-02-07

公开(公告)日:2023-05-26

公开(公告)号:CN116166715A

主分类号:G06F16/2458

分类号:G06F16/2458;G06F16/2455;G06N7/01

优先权:

专利状态码:在审-实质审查的生效

法律状态:2023.06.13#实质审查的生效;2023.05.26#公开

摘要:本发明公开了时序数据存储引擎的乱序处理方法及系统,属于时序数据库技术领域,要解决的技术问题为如何在存储和使用乱序数据的同时、保证存储引擎的性能。包括如下步骤:在内存区中配置有多个不同ZdataPoint对象,每个ZdataPoint对象中包含有多个ZBlock;在内存区分配固定大小的连续内存区作为缓存,在缓存内划分有时序内存块和乱序内存块,并在时序内存块中预留顺序空间及乱序空间;申请一个ZBlock、通过所述ZBlock将时序数据写入与所述ZBlock对应的时序内存块;对于处于已写满状态的ZBlock,通过落盘线程将时序数据落盘至磁盘区,落盘成功后,在文件索引部追加所述时序数据的信息记录。

主权项:1.一种时序数据存储引擎的乱序处理方法,其特征在于,所述存储引擎内包括内存区和磁盘区,所述时序数据包括顺序数据和乱序数据,所述方法包括如下步骤:在内存区中配置有多个不同ZdataPoint对象,每个ZdataPoint对象中包含有多个ZBlock,每个ZBlock用于调控一段时间内时序数据的存储,ZBlock之间对应的时间段没有交叉;在内存区分配固定大小的连续内存区作为缓存,在缓存内划分有用于存储时序数据的时序内存块和用于存储乱序数据的乱序内存块,所述时序内存块的内存空间大于所述乱序内存块的内存空间,并基于乱序数据概率、在时序内存块中预留用于存放顺序数据的顺序空间以及用于存放乱序数据的乱序空间;对于采集点采集的时序数据,基于采集点来源将时序数据划分至对应的ZdataPoint对象中,申请一个ZBlock、通过所述ZBlock将时序数据写入与所述ZBlock对应的时序内存块;对于处于已写满状态的ZBlock,通过落盘线程将所述ZBlock对应时序内存块中的时序数据落盘至磁盘区,落盘成功后,在文件索引部追加所述时序数据的信息记录;其中,申请一个ZBlock、通过ZBlock将时序数据写入时序内存块,遵循如下原则:将顺序数据写入顺序内存块,将乱序数据写入乱序内存块;如果当前乱序内存块已写满,新产生的乱序数据为当前ZBlock对应时间段内的,通过ZBlock申请一个乱序内存块,将新产生的乱序数据写入所述乱序内存块;如果当前顺序内存块已写满,申请一个新的ZBlock、通过所述新的ZBlock将时序数据写入与所述新的ZBlock对应的新的时序内存块;如果当前缓存已写满,基于预配置的缓存回收机制,回收预定数量的ZBlock,通过回收预定数量的ZBlock,删除所述ZBlock、并释放对应的时序内存块。

全文数据:

权利要求:

百度查询: 上海沄熹科技有限公司 时序数据存储引擎的乱序处理方法及系统

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。