数据集概述
本数据集为论文补充材料,核心内容是高性能计算(HPC)场景下,从文件型工作流向基于openPMD和ADIOS2的流数据管道迁移时使用的软件版本信息,包括自研软件分支、开源工具版本及Summit超算平台的环境模块配置,为相关技术实现提供环境参考。
文件详解
- 补充材料压缩包
- 文件名称:supplementary.zip
- 文件格式:ZIP
- 字段映射介绍:压缩包内含高性能计算工作流迁移场景下的软件版本说明文档,包含两部分内容:
- 自研软件:PIConGPU(特定GitHub分支)、GAPD(私有仓库Git标签)、openPMD-api(特定GitHub分支)的版本信息;
- 开源工具与平台模块:ADIOS2(特定Git哈希)、libfabric(版本号)及Summit超算的10项环境模块(如gcc、cuda等)的版本配置。
数据来源
论文“Transitioning from file-based HPC workflows to streaming data pipelines with openPMD and ADIOS2”的补充材料
适用场景
- HPC工作流迁移技术验证:用于复现文件型HPC工作流向流数据管道转换的实验环境,验证openPMD与ADIOS2的集成效果;
- 高性能计算软件版本管理:作为HPC场景下多工具协同的版本配置参考,支持类似工作流的环境搭建;
- 超算平台环境配置研究:分析Summit超算的模块依赖关系,为相关高性能计算任务的环境适配提供依据;
- 流数据管道技术研究:基于软件版本信息,探究openPMD和ADIOS2在HPC流数据处理中的技术实现细节。