Gigabyte R292 4S1 CPUs And Memory Installed 1

Gigabyte基于Cooper Lake CPU的2U四路服务器测评

自从Intel Xeon E7 V3系列产品以来,我们都有对4路的服务器进行测评,据我们所知,在出货量方面,4路服务器市场还是被2路产品所遥遥领先,单路服务器排在第三。对于那些需要扩展节点的客户来说,4路服务器是非常重要的产品。在本文中,我们将对技嘉(Gigabyte)的2U服务器 R292-4S1进行测评,这是一台基于Intel Xeon Scalable “Cooper Lake“处理器的4路服务器,支持高达18TB的内存。

我们通常不会对CPU/平台的基础进行深入的讨论,但是既然这个系统平台在很多方面都是由它的处理器定义的,所以我们想简要介绍一下。

第三代Intel Xeon Scalable “Cooper Lake”处理器

在2020年Q2的晚些时候,Intel发布了第三代的Xeon Scalable “Cooper Lake”处理器,这系列新的处理器的公开发布给市场上4路和8路的平台带来了非常大的更新。我们看到了更高的时钟速度,TDP,内存升级到支持DDR4-3200,支持傲腾永久内存 PMem 200,BF16的支持,最重要的是我们看到了一个新的UPI link的架构。

Intel第三代Xeon Cooper Lake CPU主要特点
Intel第三代Xeon Cooper Lake CPU主要特点

与诸如Xeon Platinum 8280的芯片上支持3个UPI link不同,Cooper Lake “H”系列的CPU支持6个UPI,这意味着在一个4路的系统配置中,一个CPU可以与另外3个CPU互联,这样CPU间通信的整体带宽就翻倍了,这就解决了之前CPU彼此间数据传输带宽不足的问题。

Gigabyte R292 Cedar Island CPU的Socket
Gigabyte R292 Cedar Island CPU的Socket

关于CPU种类,Intel在2020年Q2的发布中新增了11款新的CPU SKU,并在2020年Q3悄然上新了4款,从下图,你可以看到这15款Cooper Lake CPU的排序。

3rd Generation Intel Xeon Scalable Cooper Lake Family With Refresh
3rd Generation Intel Xeon Scalable Cooper Lake Family With Refresh

最初,作为10nm Ice Lake之前的高级处理器,我们应该在这种4 socket横向扩展的配置中采用Cooper Lake,在双 socket的系统配置中采用Whitley。大概在正式发布前的一个季度,我们发现Intel Cooper Lake已经确定发布,但是Whitley版本被临时取消了,让向上扩展的Cedar Island版本成为了唯一的发布产品。Cedar Island和Whitley都是LGA4189封装,不同的关键差异是使用Socket P4还是P5。我们在安装第三代Intel Xeon可扩展LGA4189 CPU和散热部件时会进行介绍,这儿我们使用了技嘉R292-4S1系统来展示新的socket和散热器设计。

对于那些想知道原因的人,Intel之所以继续走Cooper Lake之路的关键原因之一就是它拥有一个主要客户。我们在2020年看到Facebook在其Web前端以及更大的平台上引入了Cooper Lake Intel Xeon平台。据我们了解,Facebook需要Cooper Lake(这意味着我们的许多读者其实都“使用”了这些CPU),因此该项目继续进行了。

Intel Xeon Platinum 8380H Lscpu的命令输出
Intel Xeon Platinum 8380H Lscpu的命令输出

指令的最大变化之一是对bfloat16的支持,Facebook用它来利用空的CPU周期训练其AI模型,需要单击以放大上面的图片,在倒数第二行的中间,你可以看到avx512_bf16的支持。这是一个重要的功能,可以有效地使CPU上的FP32性能翻倍,同时使AI的保真度损失很小。

Gigabyte R292 4S1 CPUs And Memory Installed 2
Gigabyte R292 4S1 CPUs And Memory Installed 2

总的来说,Cooper Lake将继续作为Intel的SAP HANA等应用程序的扩展平台,而Ice Lake将成为主流的1P/2P的平台。在这种背景下,在今天的评测中,我们将介绍这款4 socket服务器-技嘉R292-4S1。

Gigabyte R292-4S1硬件概述

因为这个topic会变得很长,我们现在将这个topic分为两部分,机箱周边的外部,还有内部的服务器细节。

Gigabyte R292-4S1外部硬件概述

在机箱的前面,我们可以看到一些关键的功能,这是一个仅有858mm或者短于34英寸深度的2U系统。相比我们之前评测过的过去那些代的产品,这个4P的配置不再是3U或者4U高度了,它是一个2U的系统,具有大量的I/O资源,比Skylake/Cascade Lake的4P服务器具有更高的时钟速度和电源功耗。

Gigabyte R292 4S1 Front Open
Gigabyte R292 4S1 Front Open

Gigabyte(技嘉)在添加服务指南方面做得很出色,尤其在像这样被定位成低需求量的系统中,这一点很重要,因为服务技术人员可能不会像其他平台那样经常看到这种情况。我们还可以看到十个驱动器托架,由于我们有192个来自于处理器的PCIe Gen3通道可是使用,这些PCIe通道是直接连接到CPU的,而不是通过PCIe Retimer进行连接。

在前面板的左侧,我们可以看到电源和状态的LED指示灯,但是更大的功能可能是OCP NIC 3.0的插槽。这是一个PCIe Gen3 x16的NIC插槽,它将成为以后许多代服务器的标准配置。

Gigabyte R292 4S1 Front OCP
Gigabyte R292 4S1 Front OCP

在前面板的右侧,我们可以看到两个USB 3.0的端口,但你可以看到前面板的另一个主要功能:风扇。前面板的顶部安装的是NVMe SSD,底部是OCP NIC 3.0以及一个大型的风扇组。

Gigabyte R292 4S1 Front Fans 2
Gigabyte R292 4S1 Front Fans 2

对于那些想知道的人,Gigabyte(技嘉)提供了一个带有两个固定闩锁的解决方案,这些闩锁无需工具即可激活,从而可以访问下方的风扇。这可能不是最容易维护的方法,但是它比别的替代方法要好,并且确实有必要在提供足够的散热的同时保持机箱长度是短的。

Gigabyte R292 4S1 Front Fans Under NVMe
Gigabyte R292 4S1 Front Fans Under NVMe

系统的背面具有三个主要功能,首先,在Riser上有PCIe的插槽,其次,可以看到服务器的后I/O模组,第三,还有电源。

Gigabyte R292 4S1 Rear Open
Gigabyte R292 4S1 Rear Open

作为外部概览的一部分,我们将涵盖总共八个PCIe插槽,以使两个部分更加平衡。这8个插槽中的每个插槽都是一个PCIe Gen3 x16的插槽。这意味着我们可以分配128个PCIe通道,同时仍具有存储和网络连接的能力。我们将在内部概述中对此进行更多的讨论,但是大量的I/O意味着我们既需要插槽又需要线缆将PCIe通道连接到这些Riser卡上。

Gigabyte R292 4S1 PCIe Risers
Gigabyte R292 4S1 PCIe Risers