Страница 2: Тестовая конфигурация
Для тестов новых процессоров Xeon Platinum нам потребовалась обновленная конфигурация. Ниже мы ее как раз более детально рассмотрим.
Центральным компонентом каждой системы является процессор. В нашем распоряжении были два Xeon Platinum 8280, которые мы сравним с предшественниками Xeon Platinum 8180 на архитектуре Skylake.
Оба процессора оснащены 28 ядрами и могут выполнять 56 потоков одновременно. Поскольку оба варианта используют сокет LGA3647 и работают на платформе Purley, мы смогли протестировать 8280 и 8180 на одной и той же материнской плате с одинаковой памятью. Впрочем, в случае Xeon Platinum 8180 память работает на частоте 2.666 МГц, а с процессором Xeon Platinum 8280 она составляет 2.933 МГц.
Между двумя процессорами имеется разница по тактовым частотам. Базовая частота Xeon Platinum 8180 составляет 2,5 ГГц, у 8280 - 2,7 ГГц. Прирост тактовой частоты стал возможен благодаря улучшениям техпроцесса. Частота Boost увеличилась с 3,8 до 4,0 ГГц. Также 200-МГц прирост частоты обеспечивается и при нагрузке AVX. Напомним, что когда процессоры Intel нагружаются приложениями с набором инструкций AVX, AVX2 или AVX-512, они не могут сохранять тактовые частоты Turbo на том же уровне, что и без AVX из-за более высоких аппаратных требований. Intel как раз недавно опубликовала документ, где разъясняются тактовые частоты Xeon Scalable второго поколения. Разница по частотам Turbo с инструкциями AVX и без таковых составляет 600-800 МГц, в некоторых случаях даже 900 МГц. Базовая частота с инструкциями AVX, AVX2 или AVX-512 тоже снижается.
| Модель | Xeon Platinum 8180 | Xeon Platinum 8280 |
| Цена | 10.009 USD | 10.009 USD |
| Технические спецификации | ||
|---|---|---|
| Ядра | 28 | 28 |
| Потоки | 56 | 56 |
| Базовая частота | 2,5 ГГц | 2,7 ГГц |
| Частота Boost | 3,8 ГГц | 4,0 ГГц |
| Кэш L3 | 38,5 MB | 39 MB |
| TDP | 205 Вт | 205 Вт |
| Оперативная память | 786 GB DDR4-2666 | 1 TB DDR4-2933 |
| Optane DC Persistent Memory | ✗ | ✓ |
| Линии PCI Express 3.0 | 48 | 48 |
| Блоки AVX-512 FMA | 2 | 2 |
| Speed Select Technology | ✗ | ✗ |
| Resource Director Technology | ✗ | ✓ |
| DL-Boost / VNNI | ✗ | ✓ |
Тепловой пакет (Thermal Design Power) двух поколений не изменился - 205 Вт. Связь между двумя сокетами обеспечивается тремя каналами UPI. Если Xeon Platinum 8180 поддерживает 768 Гбайт памяти DDR4-2666 с ECC, то Xeon Platinum 8280 может работать уже с 1 Тбайт DDR4-2933, тоже с ECC. Последний CPU также поддерживает память Optane DC Persistent Memory. Intel предлагает некоторые CPU с расширенной поддержкой памяти - как на основе Skylake, так и Cascade Lake. Вместо 12 x 128 Гбайт DDR4, то есть 1.536 Гбайт, процессор Cascade Lake Xeon может работать с 6x 128 Гбайт DDR4 (или даже 6x 256 Гбайт DDR4) + 6x 512 Гбайт Optane DC Persistent Memory, что дает 3,84 Тбайт (4,5 Тбайт) на сокет.
Xeon Platinum 8180 и 8280 стоят порядка €11.000 (от 798.000 ₽ в России).
Supermicro X11DAi-N
Конечно, для двух процессоров Xeon требуется соответствующая материнская плата с двумя сокетами. Мы выбрали Supermicro X11DAi-N. Она поддерживает процессоры Xeon Scalable второго поколения, на материнскую плату можно установить два CPU с тепловым пакетом 205 Вт каждый.
Над каждым сокетом и под ним можно видеть по одному слоту DIMM, в которые устанавливаются планки Optane DC Persistent Memory. Возможно, мы сможем протестировать их в будущем. Платформа для Optane DC Persistent Memory у нас готова, но сами планки пока получить не удалось. В зависимости от используемой памяти, поддерживается коррекция однобитовых ошибок и определение двухбитовых.
Что касается слотов PCI Express, материнская плата предлагает 4x PCI Express 3.0 x16 и 2x PCI-Express 3.0 x8. Каждый процессор обеспечивает 48 линий PCI Express, которые распределяются по слотам. При установке карт расширения важно обращать внимание на то, к какому процессору подключен тот или иной слот.
Supermicro X11DAi-N использует чипсет C261 от Intel. Он обеспечивает десять портов SATA и два Gigabit Ethernet. Контроллера 10 GbE на плате нет. Два порта SATADOM выкрашены оранжевым, их легко узнать. К ним можно подключать накопители без дополнительного питания. Справа можно видеть два порта NVMe Oculink, которые все находят все более широкое применение в серверной сфере.
На плате присутствует слот M.2 для модулей 2260, 2280 и 22110, он подключен к CPU1 четырьмя линиями. Supermicro X11DAi-N - не просто серверная плата, а гибрид между северным решением и моделью для рабочих станций, что отлично нам подходит.
Благодаря поддержке Intelligent Platform Management Interface (IPMI) системой на Supermicro X11DAi-N можно управлять удаленно. Администратор может отслеживать аппаратную конфигурацию и прошивки, а также выполнять необходимые операции через браузер, причем даже в выключенном состоянии сервера и без операционной системы.
Цена Supermicro X11DAi-N составляет от 42.600 ₽ в России или от €550 в Европе.
SK Hynix HMA84GR7CJR4N
Мы использовали оперативную память от SK Hynix. А именно регистровые DDR4 SDRAM DIMM с модельным номером HMA84GR7CJR4N. Планки памяти работают от напряжения 1,2 В, скорость передачи обеспечивается до PC4-2933 (Xeon Platinum 8280) и PC4-2666 (Xeon Platinum 8180). Имеется и поддержка ECC.
Мы установили по шесть DIMM на сокет, чтобы задействовать 6-канальный режим работы памяти процессоров. Емкость модулей составляет 32 Гбайт каждый, что дает 192 Гбайт на сокет и 384 Гбайт на всю систему.
Цена данных планок составляет €300 за штуку (21.700 ₽), что дает порядка €3.600 (260.400 ₽) за все планки памяти.
Noctua NH-U12S DX-3647
Конечно, два процессора необходимо охлаждать. Поскольку мы отказались от классического серверного окружения с полупассивным охлаждением в стойке, то пришлось использовать более традиционные кулеры Noctua NH-U12S DX-3647. Конечно, можно было выбрать и более крупный NH-U14S DX-3647, но с ним возникали вопросы насчет совместимости с планками памяти и компонентами материнской платы.
Noctua NH-U12S DX-3647 можно устанавливать в крепления Square и Narrow ILM. Основание кулера полностью накрывает распределитель тепла процессора. За отведение тепла на радиатор отвечают пять тепловых трубок, воздушный поток обеспечивают два вентилятора NF-A12x25 120 mm.
Даже под полной нагрузкой процессоры нагревались до уровня около 60 °C при работе вентиляторов на 2.000 об/мин. Процессоры рассчитаны на температуру до 84 °C, и в серверных окружениях с высокой плотностью компонентов они действительно нагреваются выше 60 °C.
Кулеры Noctua NH-U12S DX-3647 можно приобрести от 7.300 ₽ или €100.
Не самый простой монтаж
Устанавливать процессор в столь крупный сокет нелегко. Впрочем, при должных навыках проблем не возникнет. Если у обычных процессоров Ryzen снизу упаковки расположены чувствительные ножки, то в случае TR4 и сокетов процессоров Intel они перешли на сам сокет. Поэтому лишний раз сокет лучше не задевать. Что должны как раз предотвратить защитные заглушки.
Но для LGA3647 есть еще некоторые моменты, которые стоит учитывать. Рычага с креплением Independent Loading Mechanism (ILM) здесь не используется. Конечно, Intel продолжает говорить об ILM для LGA3647, но механизм отличается от обычных розничных материнских плат. Noctua использовала монтажную рамку, в которую вставляется процессор, после чего он оказывается прикрепленным к кулеру. Затем кулер вместе с процессором устанавливается на сокет.
Вставлять процессор в сокет довольно просто. Контакт 1 промаркирован треугольником, он должен совпадать с соответствующим треугольником сокета. Также на упаковке CPU и сокете имеются вырезы и выступы, поэтому процессор в неправильной ориентации вставить не получится.
Два штырька нужны для выравнивания кулера с распределителем тепла процессора. После установки кулера необходимо затягивать четыре винта в определенной последовательности. Потребуется динамометрическая отвертка T30 с выставляемым крутящим моментом, который должен быть в точности 1,4 Н·м. При снятии кулера следует соблюдать порядок откручивания винтов.
На процессор должно оказываться правильное давление, поскольку только в таком случае все 3.746 контакта будут работать надежно. Если не повезет, то могут возникать различные проблемы. В случае плохого контакта "земли" последствия вряд ли будут, но другие проблемные контакты могут привести к отказу загрузки или некорректной работе каналов памяти. Подобные проблемы могут встречаться у всех больших сокетов LGA, в том числе AMD TR4 и SP3 для процессоров Ryzen Threadripper и EPYC. Такие же проблемы иногда возникали и с нашей сборкой на двух процессорах Xeon Platinum. В таких случаях мы вновь откручивали винты, снимали процессор с кулером, после чего устанавливали их обратно. Затем, как правило, процессор и память распознавались правильно.
Из остального аппаратного обеспечения отметим накопитель Intel Optane SSD 905P с подключением через адаптер PCI Express U.2 и 10-Тбайт Seagate Barracuda на порту SATA.