跳到主要内容

产品白皮书

1 产品概述

1.1 概述

MCCX D800是摩尔线程基于 Intel 新一代 Eagle Stream 平台所开发的新一代4U2路的人工智能服务器产品。

MCCX D800 具有卓越性能、灵活架构、扩展性强和可靠性高等特点,易于管理和部署,可应用于深度学习模型训练、深度学习推理、高性能计算、数据分析等多种应用场景。

图1 MCCX D800 产品正视图

img

图2 MCCX D800 产品后视图(8GPU Switch 机型)

img

1.2 产品特点

1.2.1 卓越性能,全面提升

  • 支持 2 颗英特尔®至强®第四代可扩展处理器 6430,单颗多达 32 个核心
  • 支持多达 32 个 DDR5 内存插槽,内存速率高达 4800MT/s,内存容量多达 12TB
  • 支持多达 24 块 2.5/3.5 英寸硬盘,其中支持多达 8 块 NVMe ,海量存储空间
  • 支持多达 10 张双宽 GPU 卡,提供强劲 AI 算力
  • 支持 400GE 网卡,满足 AI 场景对网络高带宽的要求
  • 支持多达 12 个 PCIe5.0 标准插槽
  • 支持 1 个内置专用阵列卡插槽,充分利用 PCIe 资源和机箱空间
  • 支持 1 个板载 OCP 3.0 插槽

1.2.2 配置丰富,灵活切换

  • 支持GPU AI 并联拓扑配置,灵活应对不同业务场景
  • 支持8张摩尔线程S4000全功能GPU卡和智能网卡等,满足各行各业 AI 应用需求
  • 整机算存一体,在提供海量存储资源的情况下可以匹配强劲算力,提供一体化解决方案

1.2.3 立体防护,安全可靠

  • 风扇支持热插拔,支持 N+1 冗余
  • 电源支持 N+N 冗余
  • 支持机箱入侵检测功能
  • 支持可信平台模块(TPM/TCM)
  • CPU 内置专用安全处理器
  • HDM 双因素认证管理
  • 支持丰富的 RAS 特性

2 拓扑架构

2.1 整机CPU节点

图3 MCCX D800 CPU 节点拓扑图

img

  • MCCX D800 支持 2 颗英特尔®至强®第四代可扩展处理器6430
  • 支持 3UPI
  • 支持 32DIMM DDR5
  • 支持 80lane/CPU PCIe5.0
  • 支持 12SATA 直出
  • CPU 与 BMC 支持 ESPI 通信
  • OCP 支持 PCIE 5 X16(线缆)
  • 使用 AST2600 管理芯片,可外出 VGA,管理网口等管理接口

2.2 8GPU Switch节点板

2.2.1 配置 :AI-Switch 并联配置

图4 AI-Switch 并联的 PCIe 拓扑结构

img

  • 所有 GPU 均挂载在同一 CPU 下,CPU 和 GPU 间占用两条 x16 Lane
  • 每组 4 个 GPU 都通过 PCIe Switch 通信,组内 GPU 通信效率高
  • GPU 与 CPU 间的并发带宽较高

3 整机介绍

3.1 部件

图5 服务器部件

img

表1 服务器部件说明
序号名称说明
1机箱盖_
2SATA M.2 SSD卡为服务器提供数据存储介质
3GPU卡为服务器提供图像处理和人工智能等计算服务
4OCP网卡一种网卡,安装在机箱后部,可以在不打开机箱盖的情况下进行安装和更换
5标准PCIe网卡一种网卡,支持安装到标准PCIe槽位
6OCP转接模块用于安装OCP网卡
7GPU节点板可以扩容GPU卡和PCIe卡,提供更多配置选择,从而提升整机的图像处理能力和计算性能
8机箱机箱将所有部件集中到一起
9智能挂耳用于将服务器固定到机柜,其中右侧挂耳中集成了前面板I/O组件,左侧挂耳带VGA和USB 3.0接口
10LCD可触摸智能管理模块用于查看服务器的基本信息、实时监控信息及故障信息,并可快速、准确地诊断发生故障的组件及其故障信息,同时结合HDM系统中的事件日志,即可获取该组件的详细故障信息,从而快速排除故障,使服务器各组件和系统保持良好的运行状况
11硬盘背板为硬盘供电并提供数据传输通道,本文以服务器前部配置的12LFF 硬盘背板为例
12硬盘为服务器提供数据存储介质,支持热插拔。产品支持SSD 、HDD硬盘,支持多种硬盘接口类型,如SAS、SATA 、M.2 、PCIe等
13风扇笼用于安装风扇模块
14风扇模块为服务器散热提供动力,支持热插拔,支持N+1冗余
15超级电容用于在系统意外掉电时为存储控制卡上的Flash卡供电,实现存储控制卡上数据的掉电保护
16超级电容固定座用于将超级电容固定到机箱
17CPU散热器用于为CPU散热
18CPU夹持片用于将CPU固定到散热器
19CPU集成内存控制器和PCIe控制器,为服务器提供强大的数据处理功能
20导风罩为CPU散热器和内存提供散热风道,同时为超级电容提供安装位置
21CPU底座盖片CPU底座上未安装CPU时使用,为CPU底座上的针脚提供保护功能
22内存用于暂时存放CPU中的运算数据,以及与硬盘等外部存储设备交换的数据,产品支持DDR5内存
23NVMe VROC模块NVMe VROC模块用于激活NVMe硬盘阵列特性,配合VMD技术实现 NVMe硬盘阵列功能
24主板服务器最重要的部件之一,用于安装CPU、内存和风扇等,集成了服务器的基础元器件,包括BIOS芯片、PCIe插槽等
25存储控制卡为SAS/SATA硬盘提供RAID支持,具有RAID配置、RAID扩容等功能,支持在线升级RAID卡固件、远程设置
26中置Riser卡转接卡,存储控制卡可通过该卡安装到服务器
27系统电池为系统时钟供电,确保系统日期和时间正确
28加密模块用于为服务器提供加密服务,提高服务器数据安全性
29服务器管理模块为服务器提供各类IO接口及HDM带外管理功能
30电源模块为服务器运行提供电力转换功能。电源模块支持热插拔,支持 N+N 冗余

3.2 前面板

3.2.1 服务器前面板组件

图6 前面板-24LFF 硬盘

img

表2 前面板-24LFF 硬盘组件说明
编号说明
1USB 3.0接口
2可选LCD可触摸智能管理模块
3SAS/SATA硬盘
4可选SAS/SATA硬盘或NVMe硬盘
5抽拉式资产标签
6专用管理接口
7USB 2.0接口
8VGA接口

图7 前面板-12LFF 硬盘

img

表3 前面板-12LFF 硬盘组件说明
编号说明
1USB 3.0接口
2可选LCD可触摸智能管理模块
3可选SAS/SATA硬盘或NVMe硬盘
4SAS/SATA硬盘
5抽拉式资产标签
6专用管理接口
7USB 2.0接口
8VGA接口

3.2.2 指示灯和按钮

1. 前面板指示灯和按钮

图8 前面板指示灯和按钮

img

表4 前面板指示灯说明
编号说明状态
1开机/待机按钮和系统电源指示灯• 绿灯常亮:系统已启动
• 绿灯闪烁(1Hz):系统正在开机
• 橙灯常亮:系统处于待机状态
• 灯灭:未通电
2OCP 网卡以太网接口指示灯• 绿灯常亮:OCP 3.0 网卡上,网口连接状态正常
• 绿灯闪烁(1Hz):OCP 3.0 网卡上,网口有数据收发
• 灯灭:OCP 3.0 网卡上,网口均未使用
3Health指示灯• 绿灯常亮:系统状态正常或有轻微告警
• 绿灯闪烁(4Hz):HDM 正在初始化
• 橙灯闪烁(1Hz):系统出现严重错误告警
• 红灯闪烁(1Hz):系统出现紧急错误告警
4UID按钮/指示灯• 蓝灯常亮:UID 指示灯被激活。UID 指示灯可通过以下任意方法被激活
• UID 按钮被按下
• 通过 HDM 开启 UID 指示灯
• 蓝灯闪烁:
• 1Hz:系统正在被 HDM 远程管理或正在通过 HDM 带外方式升级固 件,请勿下电
• 4Hz :HDM 正在重启(长按 UID 按钮/指示灯 8 秒及以上可重启 HDM)
• 灯灭:UID 指示灯未激活
  • 如果 Health 指示灯显示系统出现问题,请通过 HDM 查看系统运行状态。
  • 系统电源指示灯灭的原因可能有:没有接通电源、未安装电源模块、电源模块故障或系统电源指示灯线缆未连接。

2. 智能安全面板指示灯

智能安全面板的指示灯支持联动服务器健康状态,体现服务器的运行状态和健康信息,能够加快现场巡检和故障定位。智能安全面板指示灯效果支持自定义设置,缺省的指示灯效果如下表所示。

图9 智能安全面板

img

表5 智能安全面板指示灯说明
描述氛围灯状态
待机阶段Standby白灯常亮
启动阶段Post阶段白灯从中间向两侧逐个点亮,体现Post进度百分比
Post完成白灯从中间向两侧流动效果三次
运行阶段正常状态白灯呼吸(0.2Hz亮度渐变),开启灯珠的数量表示负载轻重, 随着整机负载功耗增加从中间向两侧点亮的灯珠逐渐增多, 不同负载点亮的灯珠数量占比:
• 空负载(10%以下)
• 轻负载(10%~50%)
• 中负载(50%~80%)
• 重负载(80%以上)
预告警白灯呼吸(1Hz亮度渐变)
严重错误橙灯闪烁(1Hz)
紧急错误红灯闪烁(1Hz)
远程管理系统处在远程管理或HDM正在 进行带外固件升级,请勿下电所有白灯闪烁(1Hz)
HDM正在重启部分白灯闪烁(1Hz)

3.2.3 接口

表6 前面板接口
接口名称类型用途
VGA接口DB15• 用于连接显示终端,如显示器或 KVM 设备
USB接口USB 3.0/2.0用于连接USB设备,以下情况下需要使用该接口:
• 连接 U 盘
• 连接 USB 键盘或鼠标
• 安装操作系统时,连接 USB 光驱
专用管理接口USB Type-C用于外接USB Type-C转接线,然后再转接USB WIFI模块

3.3 后面板

3.3.1 后面板组件

1. 8GPU Switch 计算模块

图10 后面板组件-8GPU Switch 计算模块

img

表9 后面板组件-8GPU Switch 计算模块说明
编号说明
18GPU Switch计算模块
2电源模块4
3电源模块3
4VGA接口
5抽可选OCP 3.0网卡(slot 5)
6USB 3.0接口(2个)
7HDM专用网络接口(1Gb/s ,RJ45,缺省IP地址:192.168.1.2/24)
8电源模块2
9电源模块1
10抽拉式资产标签

3.3.2 后面板指示灯

图11 后面板指示灯

img

表10 后面板指示灯说明
编号说明说明
1电源模块1状态指示灯• 绿灯常亮:电源模块工作正常
• 绿灯闪烁(0.33Hz):电源模块处于备用电源模式,无率输出
• 绿灯闪烁(2Hz):电源模块处于固件更新状态
• 橙灯常亮:
• 电源模块出现严重故障
• 该电源模块无输入,另一个电源模块输入正常
• 橙灯闪烁(1Hz):电源模块出现告警
• 灯灭:电源模块无输入,存在以下一种或两种情况:
• 电源线缆连接故障
• 外部供电系统断电
2电源模块2状态指示灯
8电源模块3状态指示灯
9电源模块4状态指示灯
3ATTN BUTTON 按钮和指示灯指示灯含义及说明,详见下一表格
4OCP 网卡 POWER 指示灯
5UID指示灯• 蓝灯常亮:UID 指示灯被激活。UID 指示灯可通过以下方法之一被激活:

• UID 按钮被按下
• 通过 HDM 开启 UID 指示灯
• 蓝灯闪烁:
• 1Hz:系统正在被 HDM 远程管理或正在通过 HDM 带外方式升级固 件,请勿下电
• 4Hz:HDM 正在重启(长按 UID 按钮/指示灯 8 秒及以上可重启HDM)
• 灯灭:UID 指示灯未激活
6以太网接口连接状态指示灯• 绿色常亮:网口链路已经连通
• 灯灭:网口链路没有连通
7以太网接口数据传输状态指示灯• 绿色闪烁(1Hz):网口正在接收或发送数据
• 灯灭:网口没有接收或发送数据

表11 OCP 网卡指示灯说明
ATTN BUTTON 指示灯
(橙色)
POWER 指示灯
(绿色)
说明
常亮灯灭OCP网卡异常或未安装到位
闪烁(1Hz)灯灭• 服务器处于待机状态
• 服务器处于开机过程
• 按 ATTN BUTTON 先热拔出 OCP 网卡,再热插入同类型的 OCP 网卡后(服务器正常运行状态)
灯灭闪烁(1.5Hz)OCP网卡处于上电或下电过程
灯灭常亮OCP网卡正常运行
灯灭灯灭OCP网卡已下电

3.3.3 接口

表12 后面板接口
接口名称类型用途
HDM专用网络接口RJ45用于登录HDM管理界面,进行服务器管理
USB接口USB 3.0用于连接USB设备,以下情况下需要使用该接口:
• 连接 U 盘
• 连接 USB 键盘或鼠标
• 安装操作系统时,连接 USB 光驱
VGA接口DB15用于连接显示终端,如显示器或KVM设备
电源接口标准单相电源接头用于连接电源模块和外部供电系统,为设备供电

3.4 GPU计算模块

介绍如下内容:

  • 服务器支持的 GPU 计算模块类型。
  • 每种 GPU 计算模块节点板(简称 GPU 节点板)布局。

3.4.1 GPU 计算模块类型

服务器机型支持8GPU Switch 计算模块。

  • 8GPU Switch 计算模块:支持安装 8 张全高全长双宽 GPU 卡和 4 张标准半长单宽/全高全长单宽或 2 张全高全长双宽 PCIe 卡。

3.4.2 GPU 节点板布局

1. 8GPU Switch 节点板布局

图12 8GPU Switch 节点板布局

img

表17 8GPU Switch 节点板布局说明
编号说明丝印
1从右到左依次为PCIe 5.0 x16(16,8,4,2,1)slot 7~14PCIe X16 SLOT7/GPU1 ~ PCIe X16 SLOT14/GPU8
2从右到左依次为PCIe 5.0 x16(16,8,4,2,1)slot 1~4PCIe X16 SLOT1/IO1~PCIe X16 SLOT4/IO4
3GPU计算模块电源接口1PWR1
4MCIO接口SW0-P0-ASW0-P0-A
5MCIO接口SW0-P0-CSW0-P0-C
6MCIO接口SW0-P1-ASW0-P1-A
7MCIO接口SW0-P1-CSW0-P1-C
8GPU计算模块电源接口2PWR2
9MCIO接口slot 4-ASLOT4-A
10MCIO接口slot 1-ASLOT1-A
11MCIO接口slot 1-CSLOT1-C
12MCIO接口slot 2-BSLOT2-B
13MCIO接口SW1-CSW1-C
14MCIO接口SW1-ASW1-A
15MCIO接口slot 2-DSLOT2-D
16MCIO接口slot 4-CSLOT4-C
  • PCIe5.0 x16(16,8,4,2,1)含义如下:
    • PCIe5.0:第五代信号速率。
    • x16 :连接器宽度。
    • (16,8,4,2,1):兼容的总线带宽,包括 x16 ,x8 ,x4 ,x2 和 x1。

表18 8GPU Switch 节点板的槽位 CPU 从属关系
槽位号8GPU-AI 串联方案从属 CPU8GPU-AI 并联方案从属 CPU8GPU-HPC 方案从属 CPU
Slot 1CPU1CPU1CPU1
Slot 2CPU1CPU1CPU1
Slot 3CPU1CPU1CPU2
Slot 4CPU2CPU2CPU2
Slot 5CPU1CPU1CPU1
Slot 6CPU1CPU1CPU1
Slot 7CPU1CPU1CPU1
Slot 8CPU1CPU1CPU1
Slot 9CPU1CPU1CPU1
Slot 10CPU1CPU1CPU1
Slot 11CPU1CPU1CPU2
Slot 12CPU1CPU1CPU2
Slot 13CPU1CPU1CPU2
Slot 14CPU1CPU1CPU2

3.5 主板

3.5.1 主板布局

图13 主板布局

img

表19 主板布局说明
序号含义丝印
1服务器管理模块插槽BMC CON
2SATA/PCIe M.2 SSD卡接口(2个)M.2 SSD1和M.2 SSD2
3TPM/TCM插槽TPM
4面板I/O接口RIGHT EAR
5SlimSAS接口1(x4 SATA)SATA PORT1
6SlimSAS接口3(x4 SATA)SATA PORT3
7SlimSAS接口2(x4 SATA)SATA PORT2
8GPU计算模块电源接口1SW PWR1
9GPU电源接口1GPU PWR1
10MCIO接口C1-P0A(从属于CPU 1)C1-P0A
11LCD可触摸智能管理模块接口DIAG LCD
12MCIO接口C1-P4A(从属于CPU 1)C1-P4A
13硬盘背板电源接口4PWR4
14MCIO接口C1-P4C(从属于CPU 1)C1-P4C
15MCIO接口C1-P3C(从属于CPU 1)C1-P3C
16MCIO接口C1-P3A(从属于CPU 1)C1-P3A
17硬盘背板AUX接口2AUX2
18硬盘背板电源接口3PWR3
19硬盘背板电源接口2PWR2
20硬盘背板AUX接口1AUX1
21MCIO接口C2-P4A(从属于CPU 2)C2-P4A
22MCIO接口C2-P4C(从属于CPU 2)C2-P4C
23MCIO接口C2-P3C(从属于CPU 2)C2-P3C
24硬盘背板电源接口2PWR2
25MCIO接口C2-P3A(从属于CPU 2)C2-P3A
26MCIO接口C2-P2C(从属于CPU 2)C2-P2C
27GPU计算模块电源接口2SW PWR2
28GPU电源接口8GPU PWR8
29系统电池_
30开箱检测模块、前部VGA、USB 3.0接口和专用管理接口"left" EAR
31MCIO接口C2-DMI(从属于CPU 2)C2-DMI
32GPU电源接口7GPU PWR7
33NVMe VROC模块接口NVMe RAID KEY
34中置RAID转接板电源接口PWR
35GPU电源接口6GPU PWR6
36内置USB 2.0接口INTERNAL USB2.0
37GPU电源接口5GPU PWR5
38OCP 3.0网卡AUX接口OCP AUX
39OCP 3.0网卡电源接口OCP PWR
40NCSI接口NCSI
41GPU电源接口4GPU PWR4
42GPU电源接口3GPU PWR3
43GPU电源接口2GPU PWR2
44MCIO接口C1-P0C(从属于CPU 1)C1-P0C
45MCIO接口C1-P1D(从属于CPU 1)C1-P1D
46MCIO接口C1-P1B(从属于CPU 1)C1-P1B
47MCIO接口C2-P2A(从属于CPU 2)C2-P2A
48MCIO接口C1-P2C(从属于CPU 1)C1-P2C
49GPU电源接口9GPU PWR9
50GPU电源接口10GPU PWR10
51MCIO接口C2-P0A(从属于CPU 2)C2-P0A
52MCIO接口C2-P0C(从属于CPU 2)C2-P0C
53MCIO接口C2-P1D(从属于CPU 2)C2-P1D
54MCIO接口C2-P1B(从属于CPU 2)C2-P1B
55MCIO接口C2-P2A(从属于CPU 2)C2-P2A
X系统维护开关MAINTENANCE SW

3.5.2 系统维护开关

系统维护开关有 8 个拨码,如下图所示。

图14 系统维护开关

img
通过系统维护开关,可解决以下问题,具体请参见下表。系统维护开关的具体位置请上文相关章节。

  • 忘记 HDM 登录用户名或密码,无法登录 HDM。
  • 忘记 BIOS 密码,无法进入 BIOS。
  • 需要恢复 BIOS 缺省设置。
表20 系统维护开关说明
位置含义(缺省均为 OFF)注意事项
1OFF = 登录HDM时,需要输入用户名和密码
ON = 登录HDM时,需要输入缺省用户名和密码
位置1为ON时,可永久通过缺省用户名和缺省 密码登录HDM。建议完成操作后, 重新将位置 1调整为OFF。
5OFF = 正常启动服务器
ON = 恢复BIOS缺省设置
服务器关机状态下,将位置5调整到ON状态, 然后再调整到OFF状态,最后启动服务器, BIOS即可恢复缺省设置。
注意:

当开关5调整为ON状态后,服务器将无法启动。 所以请在开关5调整为ON状态前,停止正在 运行的业务并确保服务器已关机,否则可能造成业务数据丢失。
6OFF = 正常启动服务器
ON = 启动服务器时清除BIOS的所有密码
位置6为ON时,每次启动服务器均会清除BIOS 的所有密码。
建议BIOS密码设置完成后,重新将位置6调整为OFF。
2,3,4,7,8预留

3.5.3 DIMM 插槽

DIMM 插槽布局如下图所示,A0、B0…H0 表示内存插槽号。DIMM 的具体安装准则请参见3.14.2 内存章节。

图15 内存插槽编号

img

3.6 硬盘

介绍如下内容:

  • 所有硬盘配置对应的硬盘编号
  • 硬盘指示灯的含义

3.6.1 硬盘编号

硬盘编号,即硬盘的物理槽位号,用于指示硬盘位置,与服务器前后面板上的丝印完全一致。 硬盘的物理编号和硬盘在软件(HDM、BIOS)上显示编号的对应关系,请参见产品用户指南。

图16 24LFF 硬盘编号

img

图17 12LFF 硬盘编号

img

3.6.2 硬盘指示灯

服务器支持 SAS/SATA 硬盘和 NVMe 硬盘。硬盘通过硬盘指示灯指示硬盘状态。硬盘指示灯位置 如下图所示。 图18 硬盘指示灯

img

(1):硬盘Fault/UID指示灯(2):硬盘Present/Active指示灯

SAS/SATA 硬盘支持热插拔,指示灯含义请参见下表。

表21 SAS/SATA 硬盘指示灯说明
硬盘 Fault/UID 指示灯
(橙色/蓝色)
硬盘 Present/Active 指示灯
(绿色)
说明
橙色灯闪烁(0.5Hz)常亮/闪烁(4Hz)硬盘预告性故障报警,请及时更换硬盘
橙色灯常亮常亮/闪烁(4Hz)硬盘出现故障,请立即更换硬盘
蓝色灯常亮常亮/闪烁(4Hz)硬盘状态正常,且被阵列管理工具选中
灯灭闪烁(4Hz)硬盘在位,有数据读写操作或正在进行阵列迁移/重建
灯灭常亮硬盘在位,但没有数据读写操作
灯灭灯灭硬盘未安装到位

NVMe 硬盘支持预知性热拔和热插拔,指示灯含义请参见下表。

表22 NVMe 硬盘指示灯说明
硬盘 Fault/UID 指示灯
(橙色/蓝色)
硬盘 Present/Active 指示灯
(绿色)
说明
橙色灯闪烁(0.5Hz)灯灭硬盘已完成预知性热拔出流程,允许拔出硬盘
橙色灯闪烁(4Hz)灯灭硬盘处于热插入过程
橙色灯常亮常亮/闪烁(4Hz)硬盘出现故障,请立即更换硬盘
蓝色灯常亮常亮/闪烁(4Hz)硬盘状态正常,且被阵列管理工具选中
灯灭闪烁(4Hz)硬盘在位,有数据读写操作或正在进行阵列迁移/重建
灯灭常亮硬盘在位,但无数据读写操作
灯灭灯灭硬盘未安装到位

3.7 硬盘背板

介绍服务器支持的硬盘背板,包括:背板的组件、背板支持的硬盘类型和数量。

  • 硬盘背板按支持的硬盘类型分类,可以分为 SAS/SATA 硬盘背板、UniBay 硬盘背板、硬盘背 板(XSAS/SATA+YUniBay)。
    • SAS/SATA 硬盘背板:所有硬盘槽位仅支持 SAS/SATA 硬盘。
    • UniBay 硬盘背板:所有硬盘槽位同时支持 SAS/SATA 硬盘和 NVMe 硬盘。
    • 硬盘背板(XSAS/SATA+YUniBay):所有硬盘槽位均支持 SAS/SATA 硬盘,部分硬盘槽 位支持 NVMe 硬盘。 −X:仅支持 SAS/SATA 硬盘的槽位数量。 −Y:同时支持 SAS/SATA 硬盘和 NVMe 硬盘的槽位数量。

说明:

  • UniBay 硬盘背板和硬盘背板(XSAS/SATA+YUniBay)只有在同时连接了 SAS/SATA 数据线缆和 NVMe 数据线缆时,才能同时支持两种类型的硬盘。
  • UniBay 硬盘背板和硬盘背板(XSAS/SATA+YUniBay)实际支持的 SAS/SATA 硬盘和 NVMe硬盘数量,与布线方案有关,请以实际情况为准。

3.7.1 12LFF 硬盘背板(4SAS/SATA+8UniBay)

12LFF 硬盘背板(型号:BP-12LFF)安装在机箱前部,最多支持 12 个 3.5 英寸硬盘, 包括 4 个 SAS/SATA 硬盘和8 个 SAS/SATA/NVMe 硬盘。背板组件说明如下图所示。

图19 12LFF 硬盘背板

img

表23 12LFF 硬盘背板组件说明
编号说明丝印
1MCIO接口A3(PCIe5.0 x4),支持NVMe硬盘(对应硬盘编号9)NVMe-A3
2x4 SlimSAS接口SATA PORT2
3MCIO接口B1/B2(PCIe5.0 x8),支持NVMe硬盘(对应硬盘编号6和7)NVMe-B1/B2
4电源接口PWR
5AUX接口AUX
6x8 SlimSAS接口SAS/SATA PORT1
7MCIO接口B3/B4(PCIe5.0 x8),支持NVMe硬盘(对应硬盘编号4和5)NVMe-B3/B4
8MCIO接口A4(PCIe5.0 x4),支持NVMe硬盘(对应硬盘编号8)NVMe-A4
9MCIO接口A1/A2(PCIe5.0 x8),支持NVMe硬盘(对应硬盘编号10和11)NVMe-A1/A2
  • PCIe5.0 x8 含义如下:
    • PCIe5.0:第五代信号速率。
    • x8 :总线带宽。

3.7.2 24LFF 硬盘背板(16SAS/SATA+8UniBay)

24LFF 硬盘背板安装在机箱前部,最多支持 24 个 3.5 英寸硬盘,包括 16 个 SAS/SATA 硬盘和 8 个 SAS/SATA/NVMe 硬盘。硬盘背板集成了 Expander 扩展芯片,可以通过一个 x8 SlimSAS 接口 管理 24 个 SAS/SATA 硬盘。背板组件说明如下图所示。

图20 24LFF 硬盘背板

img

表24 24LFF 硬盘背板组件说明
编号说明丝印
1x8 SlimSAS接口SAS PORT
2MCIO接口1(PCIe5.0 x8),支持NVMe硬盘(对应硬盘编号0和1)NVMe1
3MMCIO接口4(PCIe5.0 x8),支持NVMe硬盘(对应硬盘编号6和7)NVMe4
4MCIO接口2(PCIe5.0 x8),支持NVMe硬盘(对应硬盘编号2和3)NVMe2
5电源接口2PWR2
6MCIO接口3(PCIe5.0 x8),支持NVMe硬盘(对应硬盘编号4和5)NVMe3
7电源接口1PWR1
  • PCIe5.0 x8 含义如下:
    • PCIe5.0:第五代信号速率。
    • x8 :总线带宽。

3.8 LCD可触摸智能管理模块

LCD 可触摸智能管理模块的外观如下图所示,组件说明如下表所示。

通过 LCD 可触摸智能管理模块,用户可查看服务器的基本信息、实时监控信息及故障信息,并可快速、准确地诊断发生故障的组件及其故障信息,同时结合 HDM 系统中的事件日志,即可获取该组件的详细故障信息,从而帮助用户快速排除故障,使服务器各组件和系统保持良好的运行状况。 详细信息请参见《LCD 可触摸智能管理模块用户指南》。

图21 LCD 可触摸智能管理模块

img

表25 LCD 可触摸智能管理模块组件说明
序号名称说明
1Mini-USB接口用于LCD可触摸智能管理模块固件升级
2LCD可触摸智能管理模块线缆用于连接延长线缆,通过延长线缆连接至服务器上的LCD可触摸智能管理模块接口
3LCD可触摸智能管理模块外壳用于保护和固定LCD显示屏
4LCD显示屏用于服务器的基本信息、实时监控信息及故障等信息的显示

3.9 中置Riser卡

图22 中置 Riser 卡

img

表26 中置 Riser 卡组件说明
编号说明
1x8 MCIO 接口
2电源接口
3PCIe5.0 x16(8,4,2,1)slot 1
PCIe5.0 x16(8,4,2,1)含义如下:
• PCIe5.0:第五代信号速率。
• X16 :连接器宽度。
• (8,4,2,1):兼容的总线带宽,包括 x8 ,x4 ,x2 和 x1。

3.10 风扇模块


注意: 严禁自行设定风扇转速 ,风扇长时间高转会极大的影响风扇使用寿命。


服务器最多支持 4 组热插拔风扇模块,每组风扇模块由 2 个风扇组成,风扇模块布局如下图所示。 服务器支持可变的风扇速度,即风扇会根据系统实际温度调整转速。转速策略上兼顾了系统散热和系统噪音,使系统的散热和噪音达到更佳。


说明: POST 期间和操作系统运行过程中,如果系统检测到监控点温度达到紧急阈值,HDM 会将服务器系统正常关机。如果系统检测到 CPU 等关键模块温度超过最高门限值时,服务器将直接关机。监控点的实际温度和紧急阈值可通过 HDM Web 界面查看 ,具体方法请参见 HDM 联机帮助。


图23 风扇布局

img

3.11 电源模块

MCCX D800 支持 4 个 12V 电源模块;

可选 2000W/2400W/2700W 白金电源模块;

均支持 N+N 冗余。

图24 电源模块的槽位号

img

表27 电源规格(2000W)
项目2000W 交流&240V 高压直流电源模块
(DT-R1-白金)
2000W 交流&240V 高压直流电源模块
(GW-R2-白金-轻载高效)
型号DPS-2000AB-2 GGW-CRPS2000D
额定输入电压范围
@ 对应的输出功率
100V AC~127V AC 50/60Hz @ 1000W
200V AC~219V AC 50/60Hz @ 1800W
220V AC~240V AC 50/60Hz @ 2000W
100~127V AC @1000W
200~240V AC @2000W
192V DC~210V DC @ 1600W
210V DC~240V DC @ 1800W
240V DC~288V DC @ 2000W
192 ~ 230V DC ( 240V 高 压 直 流 ) @1800W
230 ~ 288V DC ( 240V 高 压 直 流 ) @2000W
额定输入电流12.0A Max @ 100V AC~127V AC
10.0A Max @ 200V AC~240V AC
12.0A Max @ 100~127V AC
11.5A Max @ 200~220V AC
10.0A Max @ 220~240V AC
10.0A Max @ 240VDC10A Max @ 240VDC
最大额定输出功率2000W2000W
效率@50%负载符合80 PLUS Platinum符合80 PLUS Platinum
环境温度要求工作温度0°C~50°C0°C~50°C
贮藏温度-40°C~70°C-40~85°C
工作湿度5%~90%5%~90%
最高海拔5000m5000m
是否冗余N+N冗余N+N冗余
热插拔支持支持
是否支持冷备份

表28 电源规格(2400W/2700W)
项目2400W 交流&240V 高压直流电源模块
(DT-R1-白金)
2700W 交流&240V 高压直流电源模块
(GW-R1-白金-轻载高效)
型号DPS-2400EB BCRPS2700D2
额定输入电压范围
@ 对应的输出功率
100~127V AC @ 1000W
180~200V AC @ 2196W
200~240V DC @ 2400W
100127V AC @1200W
200
240V AC @2700W
192V DC~210V DC @ 1980W
210V DC~220V DC @ 2196W
220V DC~288V DC @ 2400W
240V DC @2700W
额定输入电流12.5A Max @ 100V AC~127V AC
14.5A Max @ 180V AC~200V AC
14.5A Max @ 200V AC~240V AC
14.0A Max @ 100VAC~127V AC
14.0A Max @ 100VAC~127V AC
13A Max @ 192V DC~210V DC
12A Max @ 210V DC~220V DC
12A Max @ 240V DC
16.0A Max @ 240V DC
最大额定输出功率2400W2700W
效率@50%负载符合80 PLUS Platinum符合80 PLUS Platinum
环境温度要求工作温度0°C~55°C0°C~55°C
贮藏温度-40°C~85°C-40~85°C
工作湿度5%~85%0%~90%
最高海拔5000m5000m
是否冗余N+N冗余N+N冗余
热插拔支持支持
是否支持冷备份

3.12 PCIe Slot

MCCX D800当前规划了 8GPU Switch 机型,PCIe Slot 编号如下图。

图25 8GPU Switch 机型后部 PCIe Slot 编号

img

图26 中置 Raid 卡 Slot 编号

img

3.13 服务器B/D/F信息

服务器的 B/D/F 信息随着 PCIe 卡配置的变化可能会发生改变,用户可通过如下途径获取服务器的 B/D/F 信息:

  • BIOS 串口日志:如已收集串口日志,可通过搜索关键词“dumpiio”,查询到服务器的 B/D/F 信息。
  • UEFI Shell:用户可通过 pci 命令获取服务器的 B/D/F ,pci 命令具体使用方法可通过 help pci 命令获取。
  • 操作系统下获取,不同操作系统下,获取方式会有所不同,具体方法如下:
    • Linux 操作系统下:可通过"lspci -vvv"命令获取服务器的 B/D/F 信息。

说明

  • 如果操作系统没有默认支持"lspci -vvv"命令,可通过 yum 源获取、安装 pci-utils 软件包后支持。

3.14 部件安装准则及相关信息

本章节介绍各个模块的安装准则。

3.14.1 CPU

1. CPU 安装准则
  • 服务器上的 CPU 必须满配。
  • 为避免损坏 CPU 或主板,只限 摩尔线程 授权人员或专业的服务器工程师安装 CPU。
  • 请确保同一服务器上安装的 CPU 型号相同。
  • 为避免 CPU 底座中针脚损坏,请确保在未安装 CPU 的底座中安装了 CPU 盖片。
  • 为防止人体静电损坏电子组件,请在操作前佩戴防静电腕带,并将防静电腕带的另一端良好接地。
  • 为防止在拆卸过程中由于 CPU 散热器温度过高导致烫伤,请在操作前做好热防护。
2. CPU 产品型号后缀含义

CPU 产品型号 UN-CPU-INTEL-8490H 的后缀为“H”(简称 CPU 产品型号后缀)。 Intel Eagle Stream CPU 产品型号后缀含义如下表所示。

表29 Intel Eagle Stream CPU 产品型号后缀说明
CPU 产品型号后缀后缀含义后缀说明
PCloud – IaaSIaaS场景优化,针对更高主频的虚拟机应用
VCloud – SaaSSaaS场景优化,针对高密度、低功耗虚拟机应用
MMedia Transcode媒体处理场景优化
HDB and Analytics数据库和分析优化
NNetwork/5G/Edge(High TPT/Low Latency)支持网络/5G/Edge(高吞吐量/低延迟)业务
SStorage & HCI支持存储和超融合架构
TLong-life Use/High Tcase支持高寿命使用/高温度规格
U1-Socket仅支持单路运行
QLiquid cooling液冷专用CPU型号
本表提供的信息仅供参考,具体内容以Intel官网资料为准。

3.14.2 内存

内存,又称 DIMM,服务器支持的内存为 DDR5 内存。

1. 内存基本概念

(1) DDR5 服务器支持 DDR5 RDIMM 类型的内存,可提供地址奇偶校验保护功能。在服务器系统意外掉电时, DDR5中的数据会丢失。

(2) Rank 内存的 RANK 数量通常为 1、2、4、8 ,一般简写为 1R/SR、2R 、4R、8R,或者 Single-Rank、 Dual-Rank 、Quad-Rank、8-Rank。

  • 1R DIMM 具有一组内存芯片,在 DIMM 中写入或读取数据时,将会访问这些芯片。
  • 2R DIMM 相当于一个模块中包含两个 1R DIMM,但每次只能访问一个 Rank。
  • 4R DIMM 相当于一个模块中包含两个 2R DIMM,但每次只能访问一个 Rank。
  • 8R DIMM 相当于一个模块中包含两个 4R DIMM,但每次只能访问一个 Rank。

在内存中写入或读取数据时,服务器内存控制子系统将在内存中选择正确的 Rank。

(3) 内存规格 可通过内存上的标签确定内存的规格。不同 DDR 代系之间,其内存标签所表示的含义类似,本文以 DDR5 内存为例,介绍标签中各字符所指代的含义。 图27 内存标识

img

表30 内存标识说明
编号说明定义
1容量• 8GB
• 16GB
• 32GB 等
2Rank数量• 1R = Rank 数量为 1
• 2R = Rank 数量为 2
• 4R = Rank 数量为 4
• 8R = Rank 数量为 8
3数据宽度• x4 = 4 位
• x8 = 8 位
4内存代数DDR5
5内存等效速度数4800B :4800MHz
6内存类型• R = RDIMM
• L = LRDIMM

2. 内存模式

服务器支持通过以下内存模式来保护内存中的数据。


说明: Independent Mode 为缺省内存模式,在 BIOS 界面上无该配置选项。


  • Independent Mode(缺省)
  • Mirror Mode

Independent Mode 标准 ECC 可纠正 1 位内存错误、检测多位内存错误,当标准 ECC 检测到多位错误时,会通报给服 务器并使服务器停止运行。独立模式下配合其他内存 RAS 技术可纠正一位或四位内存错误(当错 误均位于内存上相同的 DDR5 颗粒时)。因而独立模式具有更强大的保护功能,可以纠正某些标准 ECC 无法纠正从而导致服务器停机的内存错误。

Mirror Mode 使用系统内存的一部分来做镜像,提高系统稳定性,以防出现无法纠正的内存错误而导致服务器停机,当检测到内存通道中发生无法纠正的错误时,服务器会从镜像内存中获取数据,镜像模式支持全镜像和部分镜像;全镜像模式下使用系统内存的一半作为镜像内存;部分镜像模式下可灵活的配 置镜像模式内存容量。

3. 安装准则

服务器支持 2 路 CPU,每路 CPU 支持 8 个通道,每个通道支持 2 根内存,即服务器支持 32 根内 存。服务器支持仅配置 DDR5 内存。 当内存非满配时,请在对应空槽位安装内存假面板。

内存和 CPU 的兼容性

内存和 CPU 的兼容性,如下表所示。

表31 内存和 CPU 的兼容性
CPU 类型CPU 兼容的内存类型@频率单颗 CPU 支持的最大内存容量
Sapphire RapidsDDR5 @4800MHz6TB

内存运行频率


说明: 内存频率、CPU支持的最高内存频率,均可以通过服务器兼容的部件查询工具查询。在查询工具中, 内存频率通过“内存条”部件名称进行查询;CPU 支持的最高内存频率通过“处理器”部件名称进行查询。


服务器中内存的运行频率,等于内存频率、CPU 支持的最高内存频率两种中较小的值。比如:内存频率为 4400MHz ,CPU 支持的最高内存频率为 4800MHz,则内存的运行频率为 4400MHz。

另外,不同 DPC(DIMM Per Channel,每个通道中配置的内存数量)配置也会影响服务器的内存实际运行频率,具体如下表所示:

表32 不同 DPC 配置下的内存实际运行频率
CPU 类型DDR5 内存频率DPC 配置内存实际运行频率
Sapphire Rapids4800MHz1DPC4800MHz
2DPC4400MHz

仅配置 DDR5 时的内存安装准则

  • 确保相应的 CPU 已安装到位。
  • 在同一台服务器上优先配置相同编码相同规格(类型、容量、Rank、频率等)的 DDR5 内存, 产品编码信息请通过官网服务器兼容的部件查询工具进行查询。如涉及部件扩容或故障需替换成其他规格的内存时,请联系技术支持确认。
  • 除上述准则外,不同内存模式还有各自特定的准则,具体请参见下表。需要注意的是,当实际内存安装不满足这些特定准则时,无论用户配置了何种内存模式,系统均会使用缺省的Independent Mode。
表33 不同内存模式的特定安装准则
内存模式特定安装准则
Independent Mode(缺省)遵循一般的内存安装准则,具体如下:
• 2 路 CPU 在位时请按照下面两张图进行配置。
Mirror Mode• 2 路 CPU 在位时,仅 16DIMMs 或32DIMMs 配置下支持该模式。
• 2 路 CPU 在位时请按照下面两张图进行配置。


说明: 下面两张图中,灰显的内存槽位(如 D1)表示黑色的内存槽位,非灰显(如 D0)的表示白色的内存槽位。


图28 2路 CPU 内存配置指导(一)

img

图29 2 路 CPU 内存配置指导(二)

img

3.14.3 SAS/SATA 硬盘​


注意:

  • 一个硬盘属于多个 RAID 的情况会使后期维护变得复杂,并影响RAID 的性能。

  • SAS/SATA 硬盘在如下情况支持热插拔:
    • 通过存储控制卡控制的 SAS/SATA 硬盘,在进入 BIOS 或操作系统后,支持热插拔操作。
  • 建议用户安装没有 RAID 信息的硬盘。
  • 请确保组建同一 RAID 的所有硬盘类型相同,否则会因硬盘性能不同而造成 RAID 性能下降或 者无法创建 RAID。即同时满足如下两点:
    • 所有硬盘均为 SAS 或 SATA 硬盘。
    • 所有硬盘均为 HDD 或 SSD 硬盘。
  • 建议组建同一 RAID 的所有硬盘容量相同。当硬盘容量不同时,系统以最小容量的硬盘为准, 即将所有硬盘容量都视为最小容量。
  • SAS/SATA 硬盘的热插拔间隔建议大于 30 秒,否则可能导致该硬盘无法被系统识别。

3.14.4 NVMe 硬盘

  • 建议用户安装没有 RAID 信息的硬盘。
  • 建议组建同一 RAID 的所有硬盘容量相同。当硬盘容量不同时,系统以最小容量的硬盘为准, 即将所有硬盘容量都视为最小容量。对于容量较大的硬盘,其多余容量无法用于配置当前 RAID,也无法用于配置其他 RAID。
  • NVMe 硬盘是否支持热拔和预知性热拔,与操作系统有关。两者的兼容关系,可通过OS 兼容性查询工具查询。
  • 操作系统支持 NVMe 硬盘支持热插拔时:
    • 插入硬盘时要匀速插入,过程中不能出现停顿,否则容易导致操作系统卡死或重启。
    • NVMe 硬盘的热插拔间隔建议大于 30 秒,否则可能导致该硬盘无法被系统识别。

3.14.5 服务器管理模块

服务器管理模块安装在主板的服务器管理模块插槽中,可为服务器提供各类 IO 接口及 HDM 带外管 理功能。

图30 服务器管理模块

img

表34 服务器管理模块说明
编号说明
1VGA 接口
2USB3.0 接口(2 个)
3HDM 专用管理接口
4UID 指示灯
5HDM 串口
6风扇控制接口
7可选 iFIST 扣卡
8NCSI 接口

3.14.6 存储控制卡及掉电保护模块

1. 存储控制卡简介

存储控制卡详细信息如下表所示。

表35 存储控制卡说明
类型存储控制卡型号安装位置是否支持掉电保护功能安装方法
板载VROC阵列控制器VROC 板载软 RAID缺省内嵌于服务器主板 PCH 中,无需用户安装不支持不涉及
标准存储控制卡RAID-LSI-9560- LP-8i-4GB安装到中置 Riser 卡或 GPU 节点板上的 PCIe插槽支持,内置Flash ,需选配 BAT-LSI-G3-A 超级电容请参见产品用户 指南
RAID-P460-B2支持,内置Flash ,需选配BAT-PMC-G3-2U 超级电容

支持掉电保护的存储控制卡必须与对应的掉电保护模块或超级电容配合使用。

板载 VROC 阵列控制器规格信息如下表所示,其他存储控制卡规格信息请查询服务器兼容的部件查 询工具。

表36 板载 VROC 阵列控制器规格
项目\型号板载 VROC 阵列控制器
端口数16个内置SATA接口
连接器类型主板上提供3个x4的SlimSAS连接器
端口特性支持6.0Gb/s SATA 3.0接口,支持对应硬盘热插拔
PCIe接口PCIe2.0 x4位宽
RAID级别RAID 0/1/5/10
位置/尺寸位置:内嵌在主板的PCH上
缓存
Flash
掉电保护不支持
超级电容接口
固件升级随BIOS升级
2. 掉电保护模块

掉电保护模块是一个总称,包含 Flash 卡和超级电容。Flash 卡有两种,一种需要安装到存储控制卡上;另一种内嵌在存储控制卡上,无需用户安装。

服务器系统意外掉电时,超级电容可为 Flash 卡供电 20 秒以上,在此期间,缓存数据会从存储控制卡的 DDR 存储器传输到 Flash 卡中。由于 Flash 卡是非易失性存储介质,故可实现缓存数据的永久保存或者保存到服务器系统上电,存储控制卡检索到这些数据为止。


说明 安装超级电容后,可能会出现电量不足,此时无需采取任何措施,服务器上电后,内部电路会自动为超级电容充电并启用超级电容。关于超级电容的状态,通过 HDM 或 BIOS 可以查看。


超级电容寿命到期注意事项:

  • 超级电容的寿命通常为 3 年~5 年。
  • 超级电容寿命到期时,可能导致超级电容异常,系统通过如下方式告警:
    • 对于 PMC 超级电容,HDM 界面中的 Flash 卡状态会显示为“异常”+“状态码”,可通过解析状态码了解超级电容异常的原因,具体请参见 HDM 联机帮助。
    • 对于 LSI 超级电容,HDM 界面中的 Flash 卡状态会显示为“异常”。
    • HDM 会生成 SDS 日志记录,SDS 日志的查看方法请参见 HDM 联机帮助。
  • 超级电容寿命到期时,需要及时更换,否则会导致存储控制卡的数据掉电保护功能失效。

说明: 更换寿命到期的超级电容后,请检查存储控制卡的逻辑盘缓存状态,若存储控制卡的逻辑盘缓存被关闭,则需要重新开启逻辑盘缓存的相关配置以启用掉电保护功能,具体配置方法请参见 HDM 联 机帮助。


3. 安装准则
  • 服务器配置标准存储控制卡时:
    • 标准存储控制卡支持安装到中置 Riser 卡上或 slot 1,建议优先配置在中置 Riser 卡上,slot 位置详见上文相关章节。
  • 支持掉电保护功能的存储控制卡必须与对应的掉电保护模块或超级电容配合使用。
  • 存储控制卡适配的掉电保护模块或者超级电容的适配关系如下表所示。
表37 存储控制卡与超级电容适配关系
存储控制卡型号掉电保护模块/超级电容型号超级电容安装位置
RAID-LSI-9560-LP-8i-4GBBAT-LSI-G3-A导风罩上的超级电容槽位或机箱 后部的超级电容槽位
RAID-P460-B2BAT-PMC-G3-2U

3.14.7 GPU 卡

1. 安装准则
  • 配置 8GPU Switch时,支持安装 8 张 GPU 卡,GPU 的安装顺序依次 为:slot7、slot8 、slot9、slot10、slot11 、slot12、slot13、slot14。

GPU 计算模块槽位的具体位置请参见上文相关章节。

3.14.8 网卡

服务器支持 OCP3.0 网卡和标准 PCIe 网卡。

1. OCP 网卡安装准则
  • OCP 网卡通过 OCP 转接模块安装到服务器,OCP 转接模块必须安装到主板上的OCP 转接模块插槽,插槽的具体位置请参见上文相关章节。
  • OCP 网卡支持热插拔,支持热插拔的操作系统,请通过OS 兼容性查询工具查询。需要注意的是:
    • 对于支持 OCP 网卡热插拔的操作系统:
      • 仅服务器上电前已经安装在位的 OCP 网卡,支持热插拔操作;同时,热插拔操作的 OCP 网卡必须同型号。若要更换不同型号的 OCP 网卡,请在服务器下电后进行更换。
      • 服务器上电前未安装在位的 OCP 网卡,不支持热插操作;此时,请先将服务器下电, 然后再安装 OCP 网卡,最后启动服务器。
    • 对于不支持 OCP 网卡热插拔的操作系统。请先将服务器下电,然后再更换 OCP 网卡,最 后启动服务器。
2. 标准 PCIe 网卡安装准则
  • 4GPU/8GPU 直通机型中标准 PCIe 网卡必须安装在 GPU 计算模块上的 PCIe slot 1 和 PCIe slot 3,各 slot 的具体位置请参见上文相关章节。
表38 4GPU/8GPU 直通计算模块上标准 PCIe 网卡的安装准则
标准 PCIe 网卡配置数量(张)Slot 1Slot 3
1X
2
  • √表示建议安装标准 PCIe 网卡的槽位。
  • X表示不建议安装标准 PCIe 网卡的槽位。
  • 如需使 GPU 计算模块上对应的slot 可用,需要连接对应的线缆,不同应用场景线缆连接方法不同,详细信息请参见产品用户指南。

  • 8GPU Switch 机型中标准 PCIe 网卡必须安装在 GPU 计算模块上的 PCIe slot 1~4,各 slot 的具体位置请参见上文相关章节。
  • 配置 8GPU Switch 计算模块时,标准 PCIe 网卡的安装准则的详细信息请参见下表。
表39 8GPU 计算模块上标准 PCIe 网卡的安装准则
标准 PCIe 网卡配置数量(张)Slot 1Slot 2Slot 3Slot 4
1XXX
2XX
3X
4
  • √表示建议安装标准 PCIe 网卡的槽位。
  • X表示不建议安装标准 PCIe 网卡的槽位。
  • 如需使 GPU 计算模块上对应的slot 可用,需要连接对应的线缆,不同应用场景线缆连接方法不同,详细信息请参见产品用户指南。

3.14.9 SATA M.2 SSD 卡

  • 为确保 SATA M.2 SSD 卡配置 RAID 时的可靠性,建议安装 2 张相同型号的 SATA M.2 SSD 卡。
  • SATA M.2 SSD 卡建议用于安装操作系统。

3.14.10 电源模块


说明 电源模块的规格信息,请参见各电源模块的电源手册。


  • 请确保服务器上安装的所有电源模块型号相同。HDM 会对电源模块型号匹配性进行检查,如果型号不匹配将提示严重告警错误。
  • 电源模块支持热插拔。
  • 请勿使用第三方电源模块,否则可能会导致硬件损坏。
  • 服务器支持 N+N 电源模块冗余。
  • 当电源模块温度超过正常工作温度,电源将自动关闭,当温度恢复到正常范围后,电源将会自动开启。
  • 电源模块与空开的适配关系:型号为 DPS-2400EB B 的电源模块,采用快熔型 20A 保险丝 (I2t=72A²sec),为避免电源模块故障导致前级空开跳闸,使用时请注意电源模块与空开的适配关系:空开与电源模块保险丝配合存在同时断开的概率,空开的电流规格越大误触发概率 越低。建议选择电流规格较大的空开,如:施耐德厂家的 IC65N C32A 型号、ABB 厂家的S201M-C32 或 S202M C32 DC 2P 型号空开等。

3.14.11 风扇模块


说明 风扇模块的规格信息,请参见各风扇模块的风扇手册。


  • 服务器上电前,风扇模块必须满配,即 4 个风扇模块必须同时在位。
  • 服务器支持 N+1 风扇冗余,即支持单风扇失效冗余。

4 产品规格

4.1 整机产品规格

表40 MCCX D800产品规格
功能特性说明
处理器支持2颗英特尔®至强®第四代可扩展处理器6430
• 单颗 CPU 支持功耗高达 270W
• 主频支持高达 2.1GHz
• 支持高达 32 核
• 两颗 CPU 间支持 3UPI 互联
内存• 可支持多达 32 根 DDR5 内存条,速率最高支持 4800MT/s,支持 RDIMM 或 LRDIMM,双路处理器最大容量 12TB
• 支持 CXL 1.1*;支持 HBM 技术*
存储控制模块• 可支持多达 2 张高性能存储控制卡
• 支持 RAID0/1/10/5/6/50/60/Tri-Mode*
硬盘扩展系统 SAS/SATA/NVMe 硬盘配置:
• 24 块 2.5/3.5 英寸 SAS/SATA/NVMe(可支持 8 块 NVMe),支持 2 块板载 M.2
• 12 块 2.5/3.5 英寸 SAS/SATA/NVMe(可支持 8 块 NVMe),支持 2 块板载 M.2
芯片组使用 C740 芯片组
系统管理芯片• 型号:Aspeed AST2600
• 支持最大分辨率:1920*1200 @60Hz(32bpp)
• 显存:64MB
网络接口• 板载 1 个 1Gb/s HDM 专用网络接口
• 1 个 OCP 网卡插槽,可以选配 OCP 3.0 网卡,OCP 3.0 网卡支持 NCSI 功能
I/O端口• 支持 5 个 USB 接口(前面板 2 个、后面板 2 个,内部 1 个)
• 1 个 RJ45 HDM 专用网络接口(后面板)
• 支持 2 个 VGA 接口(1个位于后面板,1 个位于前面板)
• 支持 1 个 TypeC Debug 口专用管理接口(前面板)
• 可选 1 个管理串口*
扩展插槽• 主板:支持 1 个阵列卡专用插槽和 1 个 OCP3.0 网卡专用插槽
• 8GPU Switch 节点板:最多支持 12 个 PCIe5.0 可用插槽
光驱支持外置 USB 光驱
电源支持4个热拔插电源模块,支持N+N冗余
风扇支持8个8056风扇,支持N+1冗余
GPU• 8GPU Switch 节点板:
• 最多支持 10 张双宽 GPU 卡*
安全性• 支持机箱入侵检测
• CPU 内置专用安全处理器
• 双因素认证
• 支持 PFR3.0 和 SGX2.0 安全技术
• 支持 TCM/TPM 安全模块
重量整机满配重量为 65kg
功耗不同配置下的功耗参数不同,具体信息请参见服务器功耗查询工具
外形/机箱尺寸• 4U 机箱
• 74.8mm (高)x 447mm(宽) x 828mm(深)(不含安全面板)
• 174.8mm (高)x 447mm(宽) x 856mm(深)(含安全面板)

[注] *具体当前可配置信息以详细产品手册为准。

4.2 整机环境参数

表41 MCCX D800环境参数
类别项目说明
环境参数温度工作环境温度:5°C~35°C
说明:
服务器部分配置下支持的最高工作环境温度会有所降低,具体请参见用户指南。
贮存环境温度:-40°C~65°C
湿度• 工作环境湿度:10%~85%(无冷凝)
• 贮存环境湿度:10%~90%(无冷凝)
海拔高度• 工作环境高度:-60m~3000m(海拔高于 900m 时,每升高 100m,规格 最高温度降低 0.33°C)
• 贮存环境高度:-60m~5000m

5 部件兼容性

5.1 CPU

5.1.1 CPU 支持情况介绍

Intel 平台CPU 计算节点支持 2 颗英特尔®至强®第四代可扩展处理器6430:

  • 单颗支持高达 32 核
  • 热设计功率高达 270W
  • 三组 UPI 互连链路
  • 支持 PCIe Gen5

5.1.2 芯片组

PCH :Intel C740(注:仅 Intel 机型有,AMD 机型无此概念)

MCCX D800 Intel 机型使用了 Intel 的 C740 系列芯片组,支持了诸多特性,例如ACPI 电源管理 4.0a、 PCIe3.0、xHCI USB 控制器、GPIO、SMBUS 2.0 等,并集成了 1GbE 网口以及 RSTe 技术,特性上支持 Intel VT-d、Intel TXT、Intel QAT 等。

表42 芯片组参数
C740 芯片组功能特性说明
封装22mm×23mm
功耗最大功耗为11W
HSIO• 支持 20 个 HSIO lanes(DMIx4 时)
• 支持 16 个 HSIO lanes(DMIx8 时
DMI第三代(带宽:x8/x4可选)
PCIe root port• 支持 14 个 PCIe Gen3 设备
• 带宽分配支持 x8 ,x4 ,x2 ,x1"
SATA支持多达20个SATA 3.0
USB支持多达14个USB2.0,10个USB3.1
SPI支持
eSPI支持
SMBus/SMLink1个主SMBus和6个SMLinks

5.2 存储

SFF 硬盘背板支持安装 SFF 形态 SAS/SATA 硬盘; LFF 硬盘背板支持安装 LFF 形态 SAS/SATA 硬盘,或 SFF 转 LFF 形态 SAS/SATA 硬盘; SFF UniBay 硬盘背板支持安装 SFF 形态 SAS/SATA/NVMe 硬盘; LFF UniBay 硬盘背板支持安装 LFF 形态 SAS/SATA/NVMe 硬盘,或 SFF 转 LFF 形态 SAS/SATA/NVMe 硬盘。


说明:

  • SFF 代表 Small Form Factor,也就是小盘形态,即 2.5 英寸硬盘。
  • LFF 代表 Large Form Factor,也就是大盘形态,即 3.5 英寸硬盘。

表43 RAID 级别比较
RAID 级别说明可靠性读性能写性能硬盘利用率
RAID 0100%
RAID 150%
RAID 5较高(N-1)/N
RAID 6较高(N-2)/N
RAID 1050%
RAID 1E50%
RAID 50较高(N-M)/N
RAID 60较高(N-M*2)/N

注: N 为 RAID 组成员盘的个数,M 为 RAID 组的子组数量

5.3 I/O扩展

MCCX D800 提供多种 PCIe 扩展卡,您可以根据需要的扩展卡类型和速率选配。

  • FC HBA 扩展卡
  • 网络扩展卡
  • SSD 扩展卡

说明: 具体的可选购系统选件,请咨询 摩尔线程当地销售代表


5.4 支持的操作系统和软件

表44 MCCX D800 支持的操作系统
序号操作系统类型
1Ubuntu Server 22.04 (64 bit) – LTS

6 智能管理规格

图31 MCCX D800 服务器软件全家福

img

  • BMC是服务器内置的软硬件一体的嵌入式管理系统,提供对服务器硬件设备的全生命周期的监、管、控,能帮助客户实现更智能的服务器运维和更高效的全生命周期管理。 基于 AST2600 进行开发的新一代 BMC 软件,在运维便捷性、可维护性以及用户体验上进行全面的升级。
  • 服务器智能集中管理软件能有效帮助企业提高运维效率,降低运维成本。 客户可根据具体的实际需求对服务器进行灵活的配置部署,从而打造专属运维环境。 FISTSMS(System Management Service)是一款配合服务器的 BMC 管理软件监控服务器资源以及性能指标的软件,同时 FIST SMS 支持转存 BMC 的事件日志和更新服务器固件&驱动版本的功能。
  • iFIST(Integrated Fast Intelligent Scalable Toolkit)软件是一款服务器嵌入式单机智能部署工具。 iFIST 可以帮助客户完成从上线、升级、部署、诊断维护、数据清除等全生命周期智能管理,有效提升服务器部署效率。
  • REPO(Repository)是服务器固件与驱动的集合(包含但不限于网卡,阵列卡等组件的驱动和固 件),用于升级服务器及服务器组件的固件及驱动。REPO 和新华三其他软件配合可以覆盖客户各种升级场景,包括单机在线升级、单机离线升级、批量在线升级以及批量离线升级功能,实现使用一套架构即可满足多场景升级,简化操作,提升运维升级效率。
  • hREST 是基于 HTTPs 协议和 Redfish(RESTful 和 IPMI)接口协议、便于用户管理服务器的客户端工具。该工具免安装。用户可通过本工具的查询、设置等命令对服务器进行管理。用户可将 hREST 集成到原有的服务器管理平台中,丰富管理功能。

  • BMC 优势
    • 支持全生命周期故障诊断系统 SDS BMC SDS (Smart Diagnose System,智能诊断系统)是一个全生命周期的设备智能诊断系统, 能够对服务器主要硬件发生的故障进行快速、精准的检测与诊断。SDS 通过收集服务器硬件发生故障时的基础数据,包括传感器、CPLD、寄存器、事件日志等,基于历史硬件故障诊断经验库,对硬件故障的发生原因进行分析定位,最终给出故障诊断结果报告。
    • 提供故障诊断和预故障诊断,其中故障准确率可达 95%
    • 强大的带外固件升级
      • 支持带外升级 BMC、BIOS 、CPLD、电源固件,网卡固件,阵列卡固件,硬盘固件、LCD 固件,支持的类型非常全面;
      • 支持 BMC 补丁升级,享受 BMC 的无感知升级;
      • 可根据运维窗口在指定时间进行升级,并建立固件仓库,更加便于固件版本管理。

  • REPO 优势
    • 用户可以根据硬件配置及操作系统,自定义固件和驱动镜像包,最小化下载所需要的固件和驱动包。
    • 使用 BMC 挂载 REPO 升级包可支持更全面的带外(BMC、BIOS、部件)升级功能。
    • 挂载 REPO 升级包可支持离线升级、批量固件升级、批量驱动升级等全场景升级。