申请/专利权人：上海仪电(集团)有限公司中央研究院

申请日：2021-05-26

公开（公告）日：2024-04-09

公开（公告）号：CN113282241B

主分类号：G06F3/06

分类号：G06F3/06

优先权：

专利状态码：有效-授权

法律状态：2024.04.09#授权;2021.09.07#实质审查的生效;2021.08.20#公开

摘要：本发明涉及一种基于Ceph分布式存储的硬盘权重优化方法及装置，所述方法包括以下步骤：S1、获取Ceph集群的状态监控信息；S2、在本地模拟环境中，基于所述状态监控信息及预先设置的优先策略，计算获得Ceph集群中存储节点内各OSD的最优权重值；S3、线上应用步骤S2获得的所述最优权重值，判断是否达到预期指标，若是，则完成权重优化，若否，则返回步骤S2。与现有技术相比，本发明最大限度的降低集群中硬盘之间的差异性，高效地自适应地调整集群中各个硬盘的权重值，从而满足用户的性能要求、容量利用率的要求，充分利用现有的资源。

主权项：1.一种基于Ceph分布式存储的硬盘权重优化方法，其特征在于，包括以下步骤：S1、获取Ceph集群的状态监控信息，所述状态监控信息包括OSD实时状态信息、CrushMap拓扑信息以及每个PG上的对象数信息；S2、在本地模拟环境中，基于所述状态监控信息及预先设置的优先策略，计算获得Ceph集群中存储节点内各OSD的最优权重值，所述优先策略包括性能优先策略、容量优先策略和性能容量均衡策略；S3、线上应用步骤S2获得的所述最优权重值，判断是否达到预期指标，若是，则完成权重优化，若否，则返回步骤S2，通过加权求和算法，调整存储使用率和性能之间的平衡；步骤S2中，所述计算获得Ceph集群中存储节点内各OSD的最优权重值具体包括以下步骤：S201、获得当前各OSD的权重值，基于当前各OSD的权重值及所述CrushMap拓扑信息，采用Ceph集群使用的Crush算法计算PG到OSD的映射关系图；S202、基于每个PG上的对象数信息及所述映射关系图获得每个OSD的存储使用量；S203、基于所述优先策略计算对应的当前偏差值，判断该当前偏差值是否小于设定阈值，若是，则以当前各OSD的权重值作为最优权重值，若否，则执行步骤S204，直至达到迭代次数上限；S204、基于所述当前偏差值，采用最优解算法或机器学习算法计算一组新的权重值，返回步骤S201；步骤S202具体包括：1每个PG的对象数，通过Ceph命令cephpgdump获取并上传到监控系统，该数据记录了每个PG的Object数量，该数据记录了当时的运行状态，与客户的读写分布有关，短时间内较为平稳，映射关系如下：Object_MAPPGij→Objectij其中下标i为第i个存储池，下标j为第j个PG，Object为对象数；2基于更新后的PG到OSD的映射，反向计算每个OSD的对象数以及存储量， 其中，OSD_Usagek为第k个OSD的存储使用量。

全文数据：

权利要求：

百度查询： 上海仪电(集团)有限公司中央研究院 一种基于Ceph分布式存储的硬盘权重优化方法及装置

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息，力求客观、公正，但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解，仅供参考使用，不能作为本公司承担任何法律责任的依据或者凭证。

阅读全文 双屏查看 官方信息 专利公告 收藏专利 下载PDF 下载WORD