申请/专利权人：柏科数据技术(深圳)股份有限公司

申请日：2023-12-22

公开（公告）日：2024-04-09

公开（公告）号：CN117453149B

主分类号：G06F3/06

分类号：G06F3/06

优先权：

专利状态码：有效-授权

法律状态：2024.04.09#授权;2024.02.13#实质审查的生效;2024.01.26#公开

摘要：本发明公开了分布式存储系统的数据平衡方法、装置、终端及存储介质，所述方法包括：获取分布式存储系统中各个归置组的数据使用信息，并基于所述数据使用信息，确定数据使用低谷时间段，所述数据使用低谷时间段反映的是所述分布式存储系统数据使用量最少的时间段；获取各个归置组所对应的数据存储量，并基于所述数据存储量确定数据接收归置组与数据释放归置组；基于所述数据使用低谷时间段，将所述数据释放归置组中的预设数据量迁移至所述数据接收归置组。本发明可对各个归置组的数据使用情况进行分析，将数据存储量多的归置组的数据迁移至数据存储量少的归置组，使得各个归置组中的数据存储量相差不大，使得各个归置组之间实现数据平衡。

主权项：1.一种分布式存储系统的数据平衡方法，其特征在于，所述方法包括：获取分布式存储系统中各个归置组的数据使用信息，并基于所述数据使用信息，确定数据使用低谷时间段，所述数据使用低谷时间段反映的是所述分布式存储系统数据使用量最少的时间段；获取各个归置组所对应的数据存储量，并基于所述数据存储量确定数据接收归置组与数据释放归置组；基于所述数据使用低谷时间段，将所述数据释放归置组中的预设数据量迁移至所述数据接收归置组；所述获取分布式存储系统中各个归置组的数据使用信息，并基于所述数据使用信息，确定数据使用低谷时间段，包括：以一天的时长为周期，记录所述周期内所有归置组的数据使用信息，并基于所述数据使用信息，确定所有归置组的每个时刻的数据使用量；将每个时刻的数据使用量与预设的使用阈值量进行比较，确定所述数据使用低谷时间段；所述将每个时刻的数据使用量与预设的使用阈值量进行比较，确定所述数据使用低谷时间段，包括：将每个时刻的数据使用量分别与所述使用阈值量进行比较，筛选出所述数据使用量小于所述使用阈值量的若干目标时刻；将若干所述目标时刻中相邻的时刻按照时间顺序进行拼接，得到若干候选时间段，当所述目标时刻中某个时刻是孤立的，不存在与之相邻的时刻，则该时刻单独成为一个候选时间段；分别获取每个候选时间段对应的数据使用量，并将数据使用量最少的候选时间段作为所述数据使用低谷时间段；所述获取各个归置组所对应的数据存储量，并基于所述数据存储量确定数据接收归置组与数据释放归置组，包括：获取预设的第一存储量阈值和第二存储量阈值，所述第一存储量阈值大于所述第二存储量阈值；分别将各个归置组所对应的数据存储量与所述第一存储量阈值以及第二存储量阈值进行比较；确定所述数据存储量大于所述第一存储量阈值的若干归置组，得到第一候选归置组；确定所述数据存储量小于所述第二存储量阈值的若干归置组，得到第二候选归置组；基于所述第一候选归置组与所述第二候选归置组，确定所述数据接收归置组与所述数据释放归置组；所述基于所述第一候选归置组与所述第二候选归置组，确定所述数据接收归置组与所述数据释放归置组，包括：将所述第一候选归置组中的若干归置组由数据存储量高至低进行排序，得到数据存储量最高的归置组，并将数据存储量最高的归置组作为所述数据释放归置组；将所述第二候选归置组中的若干归置组由数据存储量低至高进行排序，得到数据存储量最低的归置组，并将数据存储量最低的归置组作为所述数据接收归置组；或者，所述基于所述第一候选归置组与所述第二候选归置组，确定所述数据接收归置组与所述数据释放归置组，包括：将所述第一候选归置组中的每个归置组都作为数据释放归置组；将所述第二候选归置组中的每个归置组都作为数据接收归置组；在进行数据迁移时，将所述第一候选归置组中数据存储量最高的归置组与所述第二候选归置组中数据存储量最低的归置组形成数据迁移组，在彼此之间进行数据迁移；将所述第一候选归置组中数据存储量排第二的归置组与第二候选归置组中数据存储量排倒数第二的归置组形成数据迁移组，在彼此之间进行数据迁移，以此类推，形成多个数据迁移组并进行数据迁移；所述基于所述数据使用低谷时间段，将所述数据释放归置组中的预设数据量迁移至所述数据接收归置组，包括：将所述数据使用低谷时间段与预设的配置时间段取交集，得到数据迁移时间段；在所述数据迁移时间段，将所述数据释放归置组中的预设数据量迁移至所述数据接收归置组；所述在所述数据迁移时间段，将所述数据释放归置组中的预设数据量迁移至所述数据接收归置组，包括：根据所述数据释放归置组与所述数据接收归置组，确定数据量差值；将所述数据量差值中的一半作为所述预设数据量；在所述数据迁移时间段，将所述预设数据量从所述数据释放归置组迁移至所述数据接收归置组。

全文数据：

权利要求：

百度查询： 柏科数据技术(深圳)股份有限公司 分布式存储系统的数据平衡方法、装置、终端及存储介质

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息，力求客观、公正，但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解，仅供参考使用，不能作为本公司承担任何法律责任的依据或者凭证。

阅读全文 双屏查看 官方信息 专利公告 收藏专利 下载PDF 下载WORD