申请/专利权人：天津南大通用数据技术股份有限公司

申请日：2021-12-22

公开（公告）日：2024-04-23

公开（公告）号：CN114356230B

主分类号：G06F3/06

分类号：G06F3/06

优先权：

专利状态码：有效-授权

法律状态：2024.04.23#授权;2022.05.03#实质审查的生效;2022.04.15#公开

摘要：本发明提供了一种提高列存储引擎读性能的方法，包括如下步骤：S1、将数据单元DC存储至文件对象PCFile中，并对文件对象PCFile建立文件索引，将该文件索引进行存储；S2、设置对象存储缓存模块读取模式，用以列存储引擎在不同情况下调用对象存储缓存模块；S3、设置热度值，并根据热度值对对象存储缓存模块设置淘汰方法。本发明所述的一种提高列存储引擎读性能的方法满足了计算任务运行的数据资源需求，有效的增强了列存储引擎在读取对象存储数据的速度，解决了传统方法中列存储引擎读取对象存储数据缓慢的问题，为传统数据库与对象存储的结合提供了新的方法。

主权项：1.一种提高列存储引擎读性能的方法，其特征在于，包括如下步骤：S1、将数据单元DC存储至文件对象PCFile中，并对文件对象PCFile建立文件索引，将该文件索引进行存储；步骤S1具体包括如下步骤:S11、将数据单元DC存入至文件对象PCFile中，并将数据单元DC中的元数据信息BSI存入至元数据文件PFile中，建立文件对象PCFile与元数据文件PFile之间的对应关系，其中，建立文件对象PCFile与元数据文件PFile之间的对应关系是将元数据文件PFile作为文件对象PCFile的索引，将元数据文件PFile作为对象存储缓存模块内部查找文件对象PCFile的信息；S12、将文件对象PCFile和元数据文件PFile之间的对应关系存储在元数据服务中；S2、设置对象存储缓存模块读取模式，以使列存储引擎在不同情况下调用对象存储缓存模块；列存储引擎将索引传入至对象存储缓存模块内；S3、设置热度值，并根据热度值对对象存储缓存模块设置淘汰方法；步骤S3中设置热度值的指标包括：文件对象PCFile的容量、对象存储缓存模块的内存和固态硬盘的剩余容量、文件对象PCFile的最近使用时间、文件对象PCFile的使用次数、列存储引擎当前进行的操作、当前用户的历史操作习惯和当前的网络可用带宽；其中，对象存储缓存模块设置内存作为一级缓存，设置固态硬盘作为二级缓存；步骤S3具体包括如下步骤：S31、根据存储至对象存储缓存模块中的元数据文件PFile设置文件对象PCFile的热度值；S32、根据热度值大小确定文件对象PCFile的存储位置；热度值排名靠前的文件对象PCFile存储至内存中；当内存达到设定的上限时，将内存中热度值低的文件对象PCFile置换到固态硬盘中；当固态硬盘达到设定的上限时，将固态硬盘中热度值最低的文件对象PCFile淘汰，并将内存中热度值最低的文件对象PCFile置换到固态硬盘中。

全文数据：

权利要求：

百度查询： 天津南大通用数据技术股份有限公司 一种提高列存储引擎读性能的方法及系统

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息，力求客观、公正，但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解，仅供参考使用，不能作为本公司承担任何法律责任的依据或者凭证。

阅读全文 双屏查看 官方信息 专利公告 收藏专利 下载PDF 下载WORD