面向Lustre集群存储的错误日志分析及系统优化

摘要：

要集群存储系统的错误日志信息有助于优化存储系统的可用性和稳定性.现有存储系统错误探究主要针对单机存储系统或集群存储系统的部分功能进行分析评估,缺乏在实际应用场景下,同一生产环境中,长时间、多视角的探究工作.新型功能模块的不断融入,使得集群存储系统日益庞杂,集群存储系统自身引发的错误层出不穷,给各类研发人员带来了困扰与挑战.针对以上问题,提出了面向Lustre集群存储的错误日志分析及系统优化策略,通过收集连续1673天的错误日志,研究了近2.26 GB的Lustre错误日志,分析了多个版本Lustre错误的特点与问题,揭示了集群存储系统各方面的不足与错误,研究了不同Lustre版本错误的影响因素,总结了Lustre集群在实际生产环境中的常见错误,并给出了相应的解决方案.对Lustre系统研发有了许多新的见解,并总结了14个发现,最后通过采集333天的新增错误记录对14个发现进行了相关验证,给出了一些系统错误优化实例.相关测试表明,优化实例可以显著减少错误数量,提高系统的可用性和稳定性,研究结果和建议对集群存储系统本身的发展以及集群存储系统的运行和维护都有一定的参考价值.

关键词：Lustre文件系统、日志分析、系统优化、错误、可靠性

所属期刊栏目：49

分类号：TP399(计算技术、计算机技术)

资助基金：国家自然科学基金;国家自然科学基金;之江实验室中心自设科研项目

在线出版日期：2022-10-20（万方平台首次上网日期，不代表论文的发表时间）

页数：共9页

页码：1-9