自从Intel Xeon E7 V3系列产品以来,我们都有对4路的服务器进行测评,据我们所知,在出货量方面,4路服务器市场还是被2路产品所遥遥领先,单路服务器排在第三。对于那些需要扩展节点的客户来说,4路服务器是非常重要的产品。在本文中,我们将对技嘉(Gigabyte)的2U服务器 R292-4S1进行测评,这是一台基于Intel Xeon Scalable “Cooper Lake“处理器的4路服务器,支持高达18TB的内存。
我们通常不会对CPU/平台的基础进行深入的讨论,但是既然这个系统平台在很多方面都是由它的处理器定义的,所以我们想简要介绍一下。
第三代Intel Xeon Scalable “Cooper Lake”处理器
在2020年Q2的晚些时候,Intel发布了第三代的Xeon Scalable “Cooper Lake”处理器,这系列新的处理器的公开发布给市场上4路和8路的平台带来了非常大的更新。我们看到了更高的时钟速度,TDP,内存升级到支持DDR4-3200,支持傲腾永久内存 PMem 200,BF16的支持,最重要的是我们看到了一个新的UPI link的架构。
与诸如Xeon Platinum 8280的芯片上支持3个UPI link不同,Cooper Lake “H”系列的CPU支持6个UPI,这意味着在一个4路的系统配置中,一个CPU可以与另外3个CPU互联,这样CPU间通信的整体带宽就翻倍了,这就解决了之前CPU彼此间数据传输带宽不足的问题。
关于CPU种类,Intel在2020年Q2的发布中新增了11款新的CPU SKU,并在2020年Q3悄然上新了4款,从下图,你可以看到这15款Cooper Lake CPU的排序。
最初,作为10nm Ice Lake之前的高级处理器,我们应该在这种4 socket横向扩展的配置中采用Cooper Lake,在双 socket的系统配置中采用Whitley。大概在正式发布前的一个季度,我们发现Intel Cooper Lake已经确定发布,但是Whitley版本被临时取消了,让向上扩展的Cedar Island版本成为了唯一的发布产品。Cedar Island和Whitley都是LGA4189封装,不同的关键差异是使用Socket P4还是P5。我们在安装第三代Intel Xeon可扩展LGA4189 CPU和散热部件时会进行介绍,这儿我们使用了技嘉R292-4S1系统来展示新的socket和散热器设计。
对于那些想知道原因的人,Intel之所以继续走Cooper Lake之路的关键原因之一就是它拥有一个主要客户。我们在2020年看到Facebook在其Web前端以及更大的平台上引入了Cooper Lake Intel Xeon平台。据我们了解,Facebook需要Cooper Lake(这意味着我们的许多读者其实都“使用”了这些CPU),因此该项目继续进行了。
指令的最大变化之一是对bfloat16的支持,Facebook用它来利用空的CPU周期训练其AI模型,需要单击以放大上面的图片,在倒数第二行的中间,你可以看到avx512_bf16的支持。这是一个重要的功能,可以有效地使CPU上的FP32性能翻倍,同时使AI的保真度损失很小。
总的来说,Cooper Lake将继续作为Intel的SAP HANA等应用程序的扩展平台,而Ice Lake将成为主流的1P/2P的平台。在这种背景下,在今天的评测中,我们将介绍这款4 socket服务器-技嘉R292-4S1。
Gigabyte R292-4S1硬件概述
因为这个topic会变得很长,我们现在将这个topic分为两部分,机箱周边的外部,还有内部的服务器细节。
Gigabyte R292-4S1外部硬件概述
在机箱的前面,我们可以看到一些关键的功能,这是一个仅有858mm或者短于34英寸深度的2U系统。相比我们之前评测过的过去那些代的产品,这个4P的配置不再是3U或者4U高度了,它是一个2U的系统,具有大量的I/O资源,比Skylake/Cascade Lake的4P服务器具有更高的时钟速度和电源功耗。
Gigabyte(技嘉)在添加服务指南方面做得很出色,尤其在像这样被定位成低需求量的系统中,这一点很重要,因为服务技术人员可能不会像其他平台那样经常看到这种情况。我们还可以看到十个驱动器托架,由于我们有192个来自于处理器的PCIe Gen3通道可是使用,这些PCIe通道是直接连接到CPU的,而不是通过PCIe Retimer进行连接。
在前面板的左侧,我们可以看到电源和状态的LED指示灯,但是更大的功能可能是OCP NIC 3.0的插槽。这是一个PCIe Gen3 x16的NIC插槽,它将成为以后许多代服务器的标准配置。
在前面板的右侧,我们可以看到两个USB 3.0的端口,但你可以看到前面板的另一个主要功能:风扇。前面板的顶部安装的是NVMe SSD,底部是OCP NIC 3.0以及一个大型的风扇组。
对于那些想知道的人,Gigabyte(技嘉)提供了一个带有两个固定闩锁的解决方案,这些闩锁无需工具即可激活,从而可以访问下方的风扇。这可能不是最容易维护的方法,但是它比别的替代方法要好,并且确实有必要在提供足够的散热的同时保持机箱长度是短的。
系统的背面具有三个主要功能,首先,在Riser上有PCIe的插槽,其次,可以看到服务器的后I/O模组,第三,还有电源。
作为外部概览的一部分,我们将涵盖总共八个PCIe插槽,以使两个部分更加平衡。这8个插槽中的每个插槽都是一个PCIe Gen3 x16的插槽。这意味着我们可以分配128个PCIe通道,同时仍具有存储和网络连接的能力。我们将在内部概述中对此进行更多的讨论,但是大量的I/O意味着我们既需要插槽又需要线缆将PCIe通道连接到这些Riser卡上。