买专利,只认龙图腾
首页 专利交易 科技果 科技人才 科技服务 商标交易 会员权益 IP管家助手 需求市场 关于龙图腾
 /  免费注册
到顶部 到底部
清空 搜索

【发明公布】基于持久化内存的高速数据处理方法、装置、设备及介质_天翼云科技有限公司_202311690873.5 

申请/专利权人:天翼云科技有限公司

申请日:2023-12-11

公开(公告)日:2024-04-02

公开(公告)号:CN117806989A

主分类号:G06F12/0868

分类号:G06F12/0868;G06F12/0871;G06F12/0882;G06F12/123

优先权:

专利状态码:在审-实质审查的生效

法律状态:2024.04.19#实质审查的生效;2024.04.02#公开

摘要:本申请提供一种基于持久化内存的高速数据处理方法、装置、设备及介质,该方法利用持久化内存断电不丢失数据的特性,将DRAM中的data、metadata先存储到持久内存中,通过IO对齐策略,将非对齐的数据暂时存入持久化内存定义的PageCache中,待数据量大小基本对齐后,在后台将数据一次性下刷到固态盘上。采用pluglist合并进程内产生的IO,采用elevatorqueue承担进程间IO合并,提升IO带宽,降低IO延迟,延长设备寿命。在持久化内存上实施缓存淘汰策略,根据数据访问的频次,针对不同的业务类型,设定不同的IO大小阈值,通过IO大小及使用频次,提升各种业务场景下的缓存命中率。使用PMDK用内存映射方式访问持久内存,绕过驱动程序、系统调用、中断和上下文切换,提升应用访问性能。

主权项:1.一种基于持久化内存的高速数据处理方法,其特征在于,所述方法包括:在接收到服务器端的集群数据之后,基于动态内存中的至少一个内存页,分区缓存所述集群数据,获得内存页数据;基于持久内存,缓存各所述内存页对应的所述内存页数据,并对各所述内存页数据进行IO合并对齐,获得对齐数据;在完成所述内存页数据的IO合并对齐之后,将对齐后的所述对齐数据下刷至固态盘,以通过所述固态盘存储所述对齐数据;获取各IO请求对应的IO数据类型、IO数据量以及各所述IO请求在预设周期内的被访问频次;基于各所述IO请求对应的IO数据类型,确定各所述IO请求对应的IO数据量阈值,以及各所述IO请求对应的频次阈值;在当前IO请求的IO数据量小于所述IO数据量阈值,且所述被访问频次小于所述频次阈值,则删除所述持久内存中缓存的所述当前IO请求对应的所述集群数据。

全文数据:

权利要求:

百度查询: 天翼云科技有限公司 基于持久化内存的高速数据处理方法、装置、设备及介质

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。