数据写入方法、装置及存储服务器和计算机可读存储介质.pdf

(19)中华人民共和国国家知识产权局(12)发明专利申请(10)申请公布号CN111104066A(43)申请公布日2020.05.05(21)申请号201911304631.1(22)申请日2019.12.17(71)申请人华中科技大学地址430070湖北省武汉市洪山区珞喻路1037号申请人腾讯科技（深圳）有限公司(72)发明人张煜周可王桦胡健鹰吉永光(74)专利代理机构深圳市深佳知识产权代理事务所(普通合伙)44285代理人王兆林(51)Int.Cl.G06F3/06(2006.01)权利要求书3页说明书13页附图7页(54)发明名称数据写入方法、装置及存储服务器和计算机可读存储介质(57)摘要本申请公开了一种数据写入方法、装置及一种存储服务器和计算机可读存储介质，该方法包括：当接收到写入请求时，将所述写入请求对应的写入数据写入写缓冲区中；当触发所述写缓冲区的数据下刷操作时，获取所述待下刷数据对应的数据块的历史访问数据；基于所述历史访问数据判断待下刷数据是否为只写数据；若是，则将所述待下刷数据写入硬盘驱动器中；若否，则将所述待下刷数据写入缓存中。本申请提供的数据写入方法，可以有效减少写入缓存的无用流量，同时在缓存中为普通数据留出更多空间，提高缓存空间利用率，从而提高缓存的读取命中率，提升存储系统的读性能，实现了对缓存的最低写入流量，提高了写策略的效率。CN111104066ACN111104066A权利要求书1/3页1.一种数据写入方法，其特征在于，包括：当接收到写入请求时，将所述写入请求对应的写入数据写入写缓冲区中；当触发所述写缓冲区的数据下刷操作时，获取所述待下刷数据对应的数据块的历史访问数据；基于所述历史访问数据判断待下刷数据是否为只写数据；若是，则将所述待下刷数据写入硬盘驱动器中；若否，则将所述待下刷数据写入缓存中。2.根据权利要求1所述数据写入方法，其特征在于，将所述待下刷数据写入硬盘驱动器中，包括：将所述缓存中所述待下刷数据对应的脏数据刷新至所述硬盘驱动器；将所述待下刷数据写入硬盘驱动器中。3.根据权利要求1所述数据写入方法，其特征在于，将所述待下刷数据写入缓存中，包括：将所述待下刷数据写入缓存中；当满足预设条件时，将所述缓存中的数据刷新至所述硬盘驱动器中。4.根据权利要求1所述数据写入方法，其特征在于，将所述待下刷数据写入缓存中，包括：将所述待下刷数据同时写入所述缓存和所述硬盘驱动器中。5.根据权利要求1所述数据写入方法，其特征在于，所述当触发写缓冲区的数据下刷操作时，获取所述待下刷数据对应的数据块的历史访问数据，包括：当所述写缓冲区的数据量达到阈值时，触发写缓冲区的数据下刷操作，并获取所述待下刷数据对应的数据块的历史访问数据。6.根据权利要求1至5中任一项所述数据写入方法，其特征在于，所述基于所述历史访问数据判断待下刷数据是否为只写数据，包括：在所述历史访问数据中提取所述待下刷数据对应的数据块的特征信息作为第一特征信息，将所述第一特征信息输入训练完成的分类器中以便判断待下刷数据是否为只写数据。7.根据权利要求6所述数据写入方法，其特征在于，还包括：当所述缓存触发数据替换操作时，基于替换数据的历史读取数据对所述替换数据进行标记；获取所述替换数据对应的数据块的特征信息作为第二特征信息，并利用标记完成的替换数据和所述第二特征信息训练分类器得到所述训练完成的分类器。8.根据权利要求7所述数据写入方法，其特征在于，所述获取所述替换数据对应的数据块的特征信息作为第二特征信息，包括：确定所述替换数据对应的数据块所属的数据区域；其中，所述数据区域包括多个数据块，所述数据区域的大小为访问粒度的整数倍；提取所述数据区域的特征信息作为所述第二特征信息。9.根据权利要求6所述数据写入方法，其特征在于，所述特征信息包括时间特征和/或请求类特征；所述时间特征为描述访问数据块的时间的特征，所述请求类特征为描述访问2CN111104066A权利要求书2/3页数据块的请求的特征。10.根据权利要求9所述数据写入方法，其特征在于，所述时间特征包括上次访问时间戳和/或平均重用时间差；所述上次访问时间戳描述上一次访问数据块的时间点，所述平均重用时间差描述访问数据块的平均时间间隔；所述请求类特征包括平均请求大小、大请求比率、小请求比率和写请求比率中的任一项或任几项的组合；所述大请求比率描述访问数据块的请求中请求大小大于第一预设值的请求的比率，所述小请求比率描述访问数据块的请求中请求大小小于第二预设值的请求的比率，所述写请求比率描述访问数据块的请求中写请求的比率，所述第一预设值大于或等于所述第二预设值。11.根据权利要求1至5中任一项所述数据写入方法，其特征在于，所述基于所述历史访问数据判断待下刷数据是否为只写数据，包括：基于所述历史访问数据利用统计