摘要:对象存储并行文件系统在高性能计算领域被广泛采用,虽然大文件访问性能优异,但其小文件访问存在局限性.通过分析典型对象存储并行文件系统下的小文件的访问开销,采用服务端小文件专用缓存和基于对象命名关联性预取的方法提高小文件的缓存命中率,降低对象存储架构下小文件的读取延迟.基于Lustre并行文件系统实现了该方法.实际系统测试表明,该方法可显著提高小文件访问性能,其中小文件打包性能提升最大可达88%.
关键词:并行文件系统 缓存 对象存储 文件预取
单位:国防科学技术大学高性能计算国家重点实验室 湖南长沙410073
注:因版权方要求,不能公开全文,如需全文,请咨询杂志社