¡Buenas tardes, residentes de Khabrovsk! Continuaré mi historia montando una “supercomputadora en el pueblo”.
Comenzaré la tercera parte expresando mi más sincero agradecimiento a mis amigos que me apoyaron en tiempos difíciles, me motivaron, me ayudaron con dinero patrocinando durante mucho tiempo este negocio bastante caro e incluso me ayudaron con la compra de componentes en el extranjero en los casos en que No pude comprarlos localmente, dirigirme yo mismo. Por ejemplo, si una empresa que vende repuestos para servidores en EE. UU. o Canadá simplemente no los envía a Rusia. Sin su ayuda constante y prolongada, mis éxitos habrían sido mucho más modestos.
Además, gracias a sus peticiones, di el paso y abrí una cuenta en Youtube, compré un viejo smartphone Lumia 640, que uso exclusivamente como cámara de vídeo, y comencé a hacer vídeos educativos, tanto sobre el montaje de una “supercomputadora de aldea” como sobre otros aspectos y proyectos de mi vida de pueblo.
Lista de reproducción “Supercomputadora del pueblo”:
Aquellos que quieran spoilers pueden leerlos, aunque por supuesto es mejor hacerlo mientras leen mi historia o incluso después.
La segunda parte de mi historia se interrumpió al conectar la matriz de discos Tesla K20M, GT 610 y M.2 NVE SSD + al sistema. Por cierto, ¿qué más tiene de bueno esta placa Dell? Tiene un "estante de discos" incorporado, aunque solo para 6 dispositivos, y RAID no es "el más sofisticado del mundo", pero a diferencia de sus homólogos externos más profesionales. , omite el comando TRIM en el SSD. Lo cual también es importante si utilizas de forma intensiva discos SSD para servidores no profesionales.
Por cierto, también hay un punto interesante e importante sobre este foro. Los radiadores de los conjuntos de chips son bajos y tienen aletas pequeñas. Esto funciona bien cuando la placa está en su soporte original, donde potentes turbinas la impulsan. Pero cuando se utiliza la placa por separado, es necesario quitar la pegatina de plástico del radiador más cercano a las ranuras de expansión, y es recomendable sustituir el que está más alejado por cualquier radiador adecuado del chipset de una placa base antigua con aletas grandes, porque el chip ubicado debajo es el que más se calienta en el tablero.
Después de quitar la tarjeta de video del sistema, comencé a armar un marco para mi servidor, en la versión de prueba todo estaba en cinta aislante, cajas de cerillas y otros soportes de plástico, pero para uso completo 24/7/365 esta opción no parecía aceptable para mi. Era necesario hacer un marco normal a partir de una esquina de aluminio. Utilicé esquinas de aluminio de Leroy Merlin, que me envió un amigo de la región de Moscú; ¡en mi ciudad cercana simplemente no se vendían en ningún lado!
Además de las esquinas, el diseño utilizó tornillos y tuercas avellanadas M5, tornillos y tuercas M3, esquinas de muebles pequeños, remaches de aluminio para orificios de 5 mm, una remachadora, una sierra para metales, un destornillador, un taladro para metal de 5.0 mm, una lima, un destornillador Phillips, bridas para cables y brazos que no salen del culo.
Se utilizaron esquinas para unir el tablero al marco y algunos otros elementos. Esto, por supuesto, añadió algo de altura a todo el sistema, porque el tablero estaba bastante elevado por encima del plano inferior del marco, pero decidí que esto era aceptable para mí. No luché por cada gramo de peso y milímetro de altura; después de todo, esta no es una computadora a bordo de un avión donde el estándar es "15 G en 3 ejes, golpes de hasta 1000 G y vibración".
La placa está instalada, los elevadores están atornillados y el adaptador con SSD M.2 está atornillado.
La placa, SSD, elevadores y Tesla están instalados en sus lugares. El DC-DC todavía no está atornillado y está colgado de los cables detrás de escena. Esta es la versión 1.0 del servidor, todavía en un Tesla K20M.
Aquí el DC-DC ya está fijado al marco, hay una pequeña bufanda en el lateral detrás de la placa base debajo de las “colas” de alimentación.
Y este es el sistema ya ensamblado, vista superior. Encima del Tesla hay otra esquina en la que un par de SSD están atornillados uno al lado del otro, encima de ellos hay una jaula para HDD y encima del marco que cierra el marco cuelga una fuente de alimentación modular Thermaltek de 850 W. Está de moda la fuente de alimentación, una gaming, con retroiluminación RGB, que apagué para que no parpadeara como un árbol de Navidad. La única fuente de alimentación modular potente en ese momento en las tiendas de una ciudad cercana.
Vista lateral de la versión 1.0 del servidor.
Vista frontal del servidor. Los conectores y las unidades para las unidades los hice en un lado, como en los sistemas de servidor, de modo que para todas las manipulaciones no tuviera que girar todo el sistema de un lado a otro. En la “barra con recortes” hay un vástago con dos puertos USB 2.0, que conecté en lugar de un lector de tarjetas, y en su parte inferior está atornillada una placa adaptadora para M.2.
Aquí podéis ver cómo se fijan el DC-DC y la placa, precisamente las esquinas de las que os hablaba.
Vista desde el otro lado, cómo está conectado el elevador GPGPU, que es EdgeSlot.
El mismo elevador de esquina alto con potencia adicional para GPGPU que me compré a través de Whispers from America.
Se montó la máquina, se instaló el sistema operativo y los drivers, se configuró el CUDA Toolkit...
Aquí tenéis un breve vídeo sobre ella.
De esta forma, el sistema con un Tesla K20M de 5 GB funcionó durante medio año, mientras mi amigo astrónomo contaba sus tareas. Luego se fue de vacaciones y de repente usó servidores Tesla K20X de 6 GB por 6000 rublos que se encontraron en eBay, a la venta en un centro de datos en Inglaterra. Y decidimos montar la segunda versión de la “supercomputadora” utilizando 3 Tesla K20X.
Se compraron Teslas, se compró una segunda placa base exactamente igual, solo que decidieron ahorrar en la entrega y eligieron la entrega por eBay. Que se la llevó A ESPAÑA y se la entregó a un tipo completamente de izquierdas. Se abrió una disputa en eBay, el vendedor de EE. UU. me apoyó y me devolvieron el dinero, y ya me llegó el tercer pago en el USPS habitual, caro pero confiable. También llegaron otros repuestos y aquí tenéis un vídeo sobre el inicio del montaje del “superordenador de aldea” 2.0.
Vídeo sobre repuestos para esta misma “máquina”.
Lanzamiento del tablero y algunas características.
Aquí comencé a armar el framework de la segunda versión del servidor.
Ha llegado el Tesla K20X, primer vídeo.
Un vídeo educativo sobre el Tesla K20X, sobre el diseño de la tarjeta y su sistema de refrigeración, y el fastidio del bloque de agua de la GTX 780 Ti.
Continuación del video sobre Tesla K20X, escaneé su placa en un escáner, por si alguien de repente la necesita.
Parte frontal con chip GPU.
Trasero.
Como podemos ver, el Tesla K20, aunque similar “en términos generales” a la GTX 780 GTX 780 ti GTX TITAN en la GPU GK110 Kepler, no es compatible con ellos en términos de placa y sistema de refrigeración. Si tengo un Quadro K5200 K6000 GK110 Kepler, compararé su placa con la placa Tesla K20, pero hasta ahora no tengo los Quadros mencionados anteriormente.
Y aquí está la continuación de la compilación del servidor 2.0.
Nuevamente refrigeradores de 1U con caracoles y otras cosas que se requieren para un servidor con más potencia que el primero. Por cierto, tuve que desmontar el primer servidor para montar el segundo, mientras que mi amigo no tenía necesidad urgente de contar.
Un poco de gestión de cables...
Y en su lugar se instala el segundo Tesla.
Pero aquí me encontré con un fastidio ofensivo. Resultó que el sistema no puede manejar 3 unidades Tesla K20. Al iniciar la BIOS aparece este error y listo, el tercer Tesla no funciona en absoluto. Incluso actualizar el BIOS a la versión 2.8.1 no ayudó, después de lo cual la placa pasó de Dell DCS 6220 a Dell C6220 2.8.1. Encendí y desactivé varias opciones en el BIOS, incluso intenté cubrir algunos de los contactos. en el Tesla con cinta adhesiva para hacerlos 8x; nada ayudó. Tuve que aceptar la configuración de 2 Tesla K20X + NVE SSD. Por cierto, en la versión 2.0 del servidor, todas las unidades SATA viven en una canasta china con 6 compartimentos. Ahora hay un par de Samsung 860 EVO de 500 Gb + Seagate de 4 terabytes. Compré Samsung en Ali por 3600 cada uno. Ruedas OEM, pero me quedan bien.
Ahora la “supercomputadora 2.0” está completamente ensamblada y lista para usar.
Por lo demás, llegaron los repuestos comprados para el segundo sistema y volví a montar el primero, aquí os dejo un vídeo al respecto.
¿Y invito a los lectores a votar qué hacer con el primer tablero? ¿Qué cosas interesantes se pueden recopilar en base a él? O si alguien quiere comprarlo como el Tesla K20M y K20X con o sin refrigeradores tipo caracol, estoy listo, escriba.
Aquí tenéis una historia así, espero que resulte interesante y útil para los queridos lectores.
PD: Para aquellos que tuvieron la paciencia de leer hasta el final, suscríbase a mi canal en YouTube, comente, haga clic en Me gusta/No me gusta, esto me motivará a seguir publicando y filmando nuevos videos educativos.
Fuente: habr.com