Beacon+:面向E级超级计算机的轻量级端到端I/O性能监控与分析诊断系统

摘要：

随着E级计算的屏障被打破,高性能计算已经迈入了新时代.为了满足日益增长的数据访问需求,新兴的技术和存储介质都被运用到了超级计算机中,这使得其架构变得日趋复杂,其性能异常和系统热点定位也变得十分困难.为此,设计并实现了一个面向E级超级计算机的轻量级端到端I/O性能监控与分析诊断系统——Beacon+.该系统无需修改应用代码/脚本即可对每个应用的数据访问过程进行全路径实时监控与分析.通过在线+离线的压缩方法和分布式缓存/存储等机制,Beacon+在保证系统本身高扩展性、低开销的同时还可以持续稳定地提供I/O诊断服务.以神威新一代超级计算机为部署平台,通过I/O标准测试应用和实际应用证明了Beacon+的低开销和高准确性,以及I/O诊断的高效性.

关键词：I/O监控、数据压缩、I/O诊断、异常检测、性能瓶颈优化

所属期刊栏目：44

分类号：TP306(计算技术、计算机技术)

资助基金：国家重点研发计划2020YFA0607900

在线出版日期：2022-09-26（万方平台首次上网日期，不代表论文的发表时间）

页数：共11页

页码：1521-1531