一种实现文件存储QoS的方法及系统.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN114116649A(43)申请公布日2022.03.01(21)申请号202111303581.2(22)申请日2021.11.05(71)申请人浪潮云信息技术股份公司地址250100山东省济南市高新区浪潮路1036号浪潮科技园S01号楼(72)发明人靳登科闵瑞孙兴艳(74)专利代理机构济南信达专利事务所有限公司37100代理人陈婷婷(51)Int.Cl.G06F16/182(2019.01)权利要求书2页说明书6页附图1页(54)发明名称一种实现文件存储QoS的方法及系统(57)摘要本发明公开了一种实现文件存储QoS的方法及系统，属于信息技术领域，该方法基于NFS‑Ganesha实现文件存储QoS，使用NFS‑Ganesha将分布式文件系统CephFS导出，通过修改NFS‑Ganesha源码，读取新增配置文件中的CephFS子目录与读写带宽的映射关系，保存在挂载点的令牌池中；限制NFS‑Ganesha每秒钟处理的数据包总大小小于令牌池中令牌数量，从而实现CephFS子目录级别的读写带宽限制。本发明可以灵活限制CephFS子目录级别读写带宽，防止单个子目录占用过多资源，导致其他子目录性能收到影响；在某些特定场景下，可以为某些子目录分配更多资源，以提供更好的服务质量。CN114116649ACN114116649A权利要求书1/2页1.一种实现文件存储QoS的方法，其特征在于，该方法基于NFS‑Ganesha实现文件存储QoS，使用NFS‑Ganesha将分布式文件系统CephFS导出，通过修改NFS‑Ganesha源码，读取新增配置文件中的CephFS子目录与读写带宽的映射关系，保存在挂载点的令牌池中；限制NFS‑Ganesha每秒钟处理的数据包总大小小于令牌池中令牌数量，从而实现CephFS子目录级别的读写带宽限制。2.根据权利要求1所述的一种实现文件存储QoS的方法，其特征在于，新增dbus接口，通过该接口更新挂载点的令牌池，接口输入参数为挂载点ID和读写带宽的映射关系。3.根据权利要求2所述的一种实现文件存储QoS的方法，其特征在于新增配置文件，所述配置文件中保存了CephFS子目录挂载点ID与读写带宽的映射关系，配置文件结构为每行记录一个挂载点ID与读写带宽的映射关系，在NFS‑Ganesha启动时，按行读取读取配置文件中挂载点ID与读写带宽的映射关系，初始化令牌池。4.根据权利要求1或2或3所述的一种实现文件存储QoS的方法，其特征在于，一个CephFS子目录可以创建一个挂载点，挂载点对外表现为“{NFS‑Ganesha的IP}:/{子目录在CephFS中的路径}”，客户端通过执行“mount–tnfs{挂载点}{挂载路径}”将NFS‑Ganesha导出的NFS文件系统挂载到客户端上，挂载路径为客户端挂载NFS文件系统的路径。5.根据权利要求4所述的一种实现文件存储QoS的方法，其特征在于，修改NFS‑Ganesha源码后，NFS‑Ganesha启动时增加以下步骤：1)、按行读取配置文件中挂载点ID与CephFS子目录读写带宽的映射关系。2)、将挂载点ID与CephFS子目录读写带宽的映射关系保存在内存，即挂载点的令牌池中，供处理读写请求时使用，尽量减少性能损耗。6.根据权利要求5所述的一种实现文件存储QoS的方法，其特征在于，修改NFS‑Ganesha源码后，新增挂载点时增加以下步骤：1)、调用dbus接口将挂载点ID与CephFS子目录读写带宽的映射关系保存在挂载点的令牌池中；2)、新增一行配置，保存挂载点ID与CephFS子目录读写带宽的映射关系；修改NFS‑Ganesha源码后，删除挂载点时增加以下步骤：1)、调用dbus接口将保存在挂载点的令牌池的挂载点ID与CephFS子目录读写带宽的映射关系删除；2)、删除配置文件中对应的行，防止重启后读取到配置文件中的脏数据。7.根据权利要求6所述的一种实现文件存储QoS的方法，其特征在于，修改NFS‑Ganesha源码后，NFS‑Ganesha处理读写请求前增加以下步骤：1)、判断令牌池是否初始化当前挂载点与读写带宽映射关系，若存在，则当前挂载点开启QoS，若不存在，则当前挂载点不开启QoS；2)、判断该挂载点是否开启QoS，如果开启，进入步骤3)；如果不开启，开始正常读写流程；3)、判断本次请求是读请求还是写请求，如果是写请求，进入步骤4)，如果是写请求，进入步骤5)；4)、判断写令牌池中是否还有剩余令牌，如果有，写令牌池令牌数减去本次写请求大小，即请求中的length字段，然后开始正常写流程；如果没有，进入步骤6)；2CN114116649A权利要求书2/2页5)、判断读令牌池中是否