买专利,只认龙图腾
首页 专利交易 科技果 科技人才 科技服务 商标交易 会员权益 IP管家助手 需求市场 关于龙图腾
 /  免费注册
到顶部 到底部
清空 搜索

【发明公布】一种基于复写的Shard无感扩容实现方法_天翼云科技有限公司_202311712645.3 

申请/专利权人:天翼云科技有限公司

申请日:2023-12-13

公开(公告)日:2024-04-09

公开(公告)号:CN117851402A

主分类号:G06F16/22

分类号:G06F16/22;G06F16/23;G06F16/27

优先权:

专利状态码:在审-实质审查的生效

法律状态:2024.04.26#实质审查的生效;2024.04.09#公开

摘要:本发明提供一种基于复写的Shard无感扩容实现方法,属于计算机存储技术领域,该包括如下步骤,为需要进行Reshard的bucket,创建一个新的bucket实例,并开始准备进行Reshard扩容;设置桶的状态为Resharding,表示开始步骤S1中的bucket已经开始进行Reshard操作;本发明中能够在Shard扩容的过程当中允许用户进行删除、上传、修改元数据记录的操作,实现后台进行Shard扩容而对用户业务无影响,在Shard扩容完毕后能提升用户读写性能;为了保证数据的强一致性,在Reshard完成之前,需要进行一次全量对比,保证新Shard和原Shard上的数据完全一致。

主权项:1.一种基于复写的Shard无感扩容实现方法,其特征在于,包括如下步骤:步骤S1:为需要进行Reshard的bucket,创建一个新的bucket实例,并开始准备进行Reshard扩容;步骤S2:设置桶的状态为Resharding,表示开始步骤S1中的bucket已经开始进行Reshard操作;步骤S3:在桶信息中添加新创建bucket实例的id,表示如果在这之后用户进行上传删除等行为,需要同步对新的bucket实例进行操作;步骤S4:遍历旧bucket的每一个shard,将该shard上的数据通过重新均衡到新的bucketshard实例上;步骤S5:遍历errorlog,查询reshard过程,由于并发进行从旧shard同步数据到新shard从而导致当中在新的bucketshard上用户操作失败的op,并将其重新同步应用到新的bucketshard中;步骤S6:使用全量对比工具,保证新shard和旧shard的数据一致性;步骤S7:删除旧的bucketshard,完成该bucket的无感扩容。

全文数据:

权利要求:

百度查询: 天翼云科技有限公司 一种基于复写的Shard无感扩容实现方法

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。