¡Buenas tardes, queridos residentes de Khabrovsk!
Quiero contarles una historia larga y, espero, fascinante y quizás útil sobre cómo ensamblar una "supercomputadora de aldea" a partir de una placa de nodo de servidor Dell, una GPU Nvidia Tesla K20 y lo que se compró aquí y allá en varias tiendas en línea o en Tiendas de informática de tu ciudad.
La historia comenzó cuando un programador amigo mío, que también es astrónomo, empezó a estudiar redes neuronales. Su “especialista de tiempo completo” renunció y el problema recayó en el “especialista más cercano”. Yo mismo no soy programador, solo soy un “mecánico de radio para reparar equipos informáticos (con) mi diploma”, por lo que montar todo tipo de hardware informático interesante es una actividad interesante y divertida para mí. Desafortunadamente, trabajo en un área diferente.
Para formular más claramente la tarea, creé un tema en el foro "Fantasmas de hierro del pasado", donde se discutió durante bastante tiempo. Al principio surgió una idea bastante ingenua de "construir un SLI de 4 vías en una GTX 580 de 3 Gb", que gradualmente se transformó en una comprensión: ¡es necesario construir un servidor! Los precios de las placas base para servidores eran escandalosamente altos hasta que encontré un vídeo interesante en Youtube sobre el lanzamiento de una placa para servidores china en 2 procesadores de formato no estándar.
Aquí está el video:
Me complació especialmente el precio económico del sistema en este video.
Sin embargo, la consulta con camaradas más conocedores que trataban con servidores chinos me convenció: "¡No necesitamos la felicidad china!" Según sus revisiones, los servidores chinos eran simplemente monstruosamente poco confiables. Y comencé a buscar en Avito opciones con placas de servidor Dell. Tengo dos portátiles de esta empresa y sólo tengo impresiones positivas de ellos. Tecnología muy confiable.
En Avito encontré una placa de nodo de servidor Dell PowerEdge C6220 en el proceso de comunicación con el vendedor; me sugirió un sitio excelente donde había una publicación sobre cómo un artesano lanzó dicha placa. . Y había un enlace a un foro estadounidense donde se ensamblaban potentes estaciones de trabajo en dichos tableros..
Leí todo el tema de principio a fin, decidí metas, objetivos y formas de lograrlos. La tarea se formuló de la siguiente manera: "Montar un servidor de doble procesador en una placa de nodo Dell PowerEdge C8220 con una GPU Tesla K10 o K20". La elección de GPU especializadas se produjo después de una discusión con la persona para quien realmente se estaba ensamblando el sistema: al tener "tarjetas" que podían realizar cálculos a largo plazo con doble precisión y controlar los errores de la memoria ECC, podía usarlas para sus investigaciones científicas. actividades, y no sólo para entrenar redes neuronales. Lo cual realmente le alegró mucho.
Para discutir y registrar la historia del proceso de montaje en el foro “Fantasmas de hierro del pasado”, creé un tema correspondiente, donde escribí sobre el proceso y publiqué fotografías. .
La tarea estaba fijada y comencé a buscar componentes. En el momento en que empezó todo, todavía no estaba registrado en eBay y al principio los repuestos necesarios los compraban mis amigos, a quienes yo pagaba los gastos de compra y envío. Posteriormente yo mismo me registré allí y comencé a comprar directamente, aunque a veces tengo que pedir ayuda a quienes tienen cuentas en Shopotam y servicios similares. No todos los repuestos necesarios se envían directamente desde EE. UU. a Rusia.
La primera placa base que compré en eBay fue la Dell PowerEdge C8220 0083N0. Según la documentación de Dell, pertenecía a la versión de placa 1.2 y tenía 3 ranuras PCI-E 16x. Hay dos normales cerca del botón de encendido y un tercero en el otro lado de la placa no es estándar, para el llamado elevador GPGPU, que se incluyó en el llamado Edge Slot.
Foto del tablero, el mismo 0083N0, foto de eBay.
Y esta es mi foto, se adjunta una regla al tablero para comprender la escala.
En ese momento también me había llegado un riser para GPGPU en el mismo Edge Slot.
Aquí hay una foto donde está conectado a su lugar habitual para realizar pruebas.
Al mismo tiempo, se compró en eBay un adaptador de corriente, desde ATX a este conector de alimentación C6100. Hay dos tipos que se venden en eBay, de 12 y 18 pines. Necesitamos esto último, y también un impulso DC-DC para convertir +5VSB de la fuente de alimentación ATX en +12VSB del servidor Dell. Y, por supuesto, el conector hembra en el conector para instalar el puente necesario para iniciar la placa y emitir la señal PS_ON desde ella. Por cierto, tiene un paso de contacto no estándar de 2.0 mm. Por supuesto, los chicos desesperados pueden clavar un destornillador o un clavo directamente en el conector de la placa, pero yo preferí hacer todo de forma civilizada.
Además, para probar la placa, compramos el Xeon E5-2604 V1 más barato de Aliexpress y un par de tarjetas de memoria DDR3 ECC REG de eBay, que se vendieron como compatibles con el Dell PowerEdge C8220. En primer lugar, utilicé refrigeradores Alpine 20 Plus C0 para LGA 2011, que tuvieron que modificarse: sus bordes que descansaban sobre las ranuras de memoria se lijaron con una amoladora, se quitaron arandelas de resorte de los tornillos de fijación y se quitaron un par de tuercas. atornillado a las roscas, para no atornillar los tornillos demasiado profundamente y no romper la tabla. Los zócalos de servidor LGA 2011 están diseñados de forma ligeramente diferente a los normales y las roscas de los tornillos del disipador de calor deben ser cortas. Por cierto, los refrigeradores funcionaron bien, a pesar de que eran puramente de aluminio.
Y así, llegó el momento en que llegaron los procesadores, capturé su instalación en una foto como recuerdo.
Y aquí están instalados los mismos refrigeradores de aluminio Alpine.
Sistema ensamblado y en funcionamiento.
Mi antigua y fiel fuente de alimentación Chieftek de 550 W estaba conectada al sistema, un concentrador USB para 4 dispositivos, que incluía un teclado, un mouse y una unidad flash con Ubuntu, un lector de tarjetas estaba conectado al conector para un lector de tarjetas USB en el placa en la que conecté un dispositivo de audio USB chino, también conecté un monitor VGA y un cable de conexión al puerto IPMI de 100 Mbit, que se llama Delicate-NIC. Junto a él hay dos puertos de 10 Gbe que funcionan con cobre de par trenzado normal y son totalmente compatibles con una red 100/1000 normal.
El sistema se inició de esta forma y resultó que la placa verificó la memoria durante mucho tiempo durante el inicio. Y en la pantalla de inicio del BIOS se llamaba Dell DCS 6220.
Aquí terminaré la primera parte de mi historia para no aburrir a los lectores agradecidos.
Enlace a la parte 2:
Fuente: habr.com