硬件配置
本系统配置了 3 个登录节点,328 个 CPU 计算节点,14 个 GPU 计算节点,一套 1.8P 共享存
储。所有节点通过 100Gb/s EDR Infiniband 互联组成计算和存储网络。系统详细配置如下:
1) 登录节点:共 3 个登录节点。
2) GPU 计算节点:
10 个 NVIDIA GPU 计算节点,每个节点配置 2 颗 Intel Golden 6240 系列处理器,
共 36 个物理核,384GB 内存,8 个 NVIDIA GPU 卡。
2 个 NVIDIA GPU 计算节点,每个节点配置 2 颗 Intel Golden 6240R 系列处理器,
共 48 个物理核,384GB 内存,8 个 NVIDIA GPU PCIe 卡。
2 个 NVIDIA GPU 计算节点,每个节点配置 2 颗 AMD EPYC 7742 系列处理器,共
128 个物理核,384GB 内存,8 个 NVIDIA GPU SXM4 卡。
3) CPU 计算节点:
260 个 CPU 计算节点,每个节点配置 2 颗 Intel Golden 6240 系列处理器,共 36 物理核,
384GB 内存(根据 IB 网络配置,单个作业最多使用 160 个计算节点)。
68 个 CPU 计算节点,每个节点配置 2 颗 Intel Golden 6240R 系列处理器,共 48 个物理
核,384GB 内存。
4) 并行存储系统:配置一套 DDN 并行存储系统,共配置 1.8PB 存储容量。
5) 管理网络:配置一套千兆管理网;
6) 带外管理网络:配置一套千兆带外管理网;
7) 计算网络:配置一套 100Gb/s 高速 Infiniband 网。
软件配置
系统软件配置环境如下:
1) 操作系统:采用 CentOS 7.6 版本操作系统;
《北京航空航天大学校级计算平台项目》用户手册
4
2) 作业调度软件:采用 Slurm 19.04 作业调度系统;
3) 并行文件系统:采用 DDN 并行文件系统;
4) 编译环境:GNU、Intel 编译环境、CUDA;
5) 并行环境:MPICH、MVAPICH、OPENMPI、Intel MPI;
6) 应用软件:Gromacs、Lammps、R、 VASP(需要授权)、OpenFoam、Ansys(试用)、
Fluent(试用)、CFX(试用)、Matlab、Moose 等;
7) 其他工具软件:Anaconda、fftw、CAFFE、HDF5、QT、PyTorch。
系统架构
系统硬件架构图如下:
