Durante muchos años en el mercado de procesadores de servidor y chipsets, Intel y sus xeons gobernaron incondicionalmente, pero en 2017 AMD finalmente compitió con ellos con el lanzamiento de la primera línea de sus nuevos procesadores de servidor EPYC. Desde entonces, su posición solo se ha fortalecido, y la alineación se ha reabastecido con una nueva versión de "épicas". AMD suministra sus procesadores modernos a muchas empresas conocidas, incluidas Dropbox, Hetzner, Linode, CERN, OVHcloud, Scaleway, varias universidades y organizaciones más pequeñas, incluidos centros de datos. Todos elogian las plataformas de EPYC y las recomiendan para organizar y escalar un clúster de servidores de alto rendimiento.
Cuando comenzaron a llegar las noticias de que AMD comenzaba a fabricar procesadores que superaban a los
procesadores Intel en términos de rendimiento y relación precio / calidad, comenzamos a pensar en un servicio separado en esta plataforma. La elección recayó en Supermicro A + Server 2124BT-HNTR . El servidor consta de 4 nodos, cada nodo tiene la siguiente especificación:
- Procesadores: 2 procesadores AMD EPYC 7742 de 64 núcleos a 2,25 GHz;
- Memoria: 16x64GB RAM 3200 MT / s;
- Discos NVMe para el clúster: 4x INTEL SSDPE2KE076T8;
- Disco del sistema: 1x INTEL SSDSC2KB240G8;
- Controlador de red: AOC-MH25G-m2S2T.
Todas las caracteristicas
No existía tal servidor en Moscú y Rusia, tuvimos que pedirlo directamente al
fabricante. Después de la espera, que se complementó con algunos problemas logísticos asociados con COVID-19, el servidor terminó con nosotros a principios de junio.
Montaje
A primera vista nos pareció que no hay nada particularmente épico en el servidor, ya que tenemos experiencia trabajando con plataformas de 12 nodos para el servicio de servidores Hi-CPU . La misma plataforma representa solo cuatro nodos independientes, pero aún no entendíamos cuánta energía brindan en conjunto.
Pruebas
Después del montaje, por supuesto, queríamos cargar el servidor, estamos tratando con un monstruo, en
total, que tiene 1024 núcleos, 4TB de RAM en 4 nodos: Imagen en la que se puede hacer clic Los resultados de las pruebas de rendimiento nos impresionaron. La calidad de construcción de los ingenieros de Supermicro también es agradable.
Instalación
Lo montamos en un rack y comenzamos a ensamblar el clúster: El
clúster se ensambla en estos 4 nodos. En el futuro, el clúster se puede escalar en
equipos similares o en equipos similares de otros proveedores. La red pública del clúster está ubicada en
interfaces de 25Gbps (SFP28), la red privada también es de 25Gbps (SFP28).
Revisión de software
Los fundamentos y principios establecidos en el software de gestión de servicios al cliente hicieron posible finalizar rápidamente el código para la nueva arquitectura, a mediados de junio se lanzó el servicio Epic Servers .
Beneficios para nosotros y los clientes
AMD EPYC le permite crear tarifas de hasta EPIC 128 x 3,4 GHz CPU / 512 GB RAM / 4000 GB NVMe, que nadie puede ofrecer en una plataforma con procesadores de Intel. Además, utilizamos solo NVMe NAS con triple replicación de datos.
Durante 2 meses de trabajo con esta plataforma, sentimos todos sus encantos: los clientes pueden recibir los mismos recursos que en el caso de Intel, pero por menos dinero. Un nodo con 2 CPU de AMD reemplaza 10 nodos con 2 CPU Intel Scalable Silver.
Una cucharada de alquitrán
Un servidor de este tipo es muy caro: el costo es de aproximadamente $ 150,000 y, por supuesto, se compró con un prepago completo; de hecho, estábamos comprando un cerdo en un poke ya que nunca antes habíamos trabajado con servidores AMD.
El segundo punto, QEMU-KVM no permite la migración ininterrumpida de máquinas virtuales de AMD a Intel y viceversa, pero utilizando nuestra funcionalidad de respaldo , puede cambiar de un tipo de servidor a otro en cualquier momento sin pérdida de datos.
El clúster nos mostró indicadores de rendimiento previamente desconocidos, que naturalmente
comenzaron a afectar la temperatura de los procesadores. Incluso con una carga del procesador del 30% en el nodo, la temperatura se acercaba a los 95 grados. Hemos optimizado un poco la refrigeración en
rack, pero no dio ningún resultado significativo. Luego, a modo de prueba, quitaron la tapa de la carcasa del servidor:
el salto de temperatura fue de más de 10 grados y no superó los 80 grados, incluso con una
carga superior al 70%, lo que nos satisface sobradamente. También hay planes para colocar refrigeración adicional en el bastidor.
Salir
Como resultado, el servidor cumplió con creces nuestras expectativas, el procesador AMD EPYC 7742 nos parece irrompible bajo carga. El esquema basado en tales soluciones continuará
escalando, con el tiempo planeamos lanzar este servicio en los Países Bajos. ¡Disfrutamos trabajando con EPYC y esperamos que tú también lo disfrutes!
