{"id":143998,"date":"2025-09-23T05:12:23","date_gmt":"2025-09-23T03:12:24","guid":{"rendered":"https:\/\/prohoster.info\/blog\/novosti-interneta\/otkryt-kod-raspredelyonnoj-fajlovoj-sistemy-ternfs"},"modified":"2025-09-23T05:12:23","modified_gmt":"2025-09-23T03:12:24","slug":"otkryt-kod-raspredelyonnoj-fajlovoj-sistemy-ternfs","status":"publish","type":"post","link":"https:\/\/prohoster.info\/es\/blog\/news\/otkryt-kod-raspredelyonnoj-fajlovoj-sistemy-ternfs","title":{"rendered":"Se ha abierto el c\u00f3digo del sistema de archivos distribuido TernFS.","gt_translate_keys":[{"key":"rendered","format":"text"}]},"content":{"rendered":"

La empresa XTX Markets ha abierto el c\u00f3digo fuente del sistema de archivos TernFS, dise\u00f1ado para crear un almacenamiento distribuido, abarcando m\u00faltiples centros de datos geogr\u00e1ficamente separados y capaz de almacenar decenas de exabytes de datos, trillones de archivos y cientos de miles de directorios, con los que pueden interactuar simult\u00e1neamente millones de clientes. El c\u00f3digo del proyecto est\u00e1 escrito en C++ y Go y se distribuye bajo la licencia GPLv2. Las especificaciones del protocolo y las bibliotecas cliente se proporcionan bajo la licencia Apache 2.0. <\/p>\n

El sistema de archivos est\u00e1 optimizado para cargas caracter\u00edsticas de sistemas de aprendizaje autom\u00e1tico \u2014 lecturas y escrituras de archivos que no se modifican despu\u00e9s de su creaci\u00f3n y que contienen m\u00e1s de unos pocos megabytes de datos. El sistema de archivos no est\u00e1 dise\u00f1ado para la creaci\u00f3n frecuente de nuevos directorios ni para el movimiento frecuente de archivos entre directorios. Hay capacidades tanto para recuperar archivos o directorios eliminados por error como para configurar pol\u00edticas de eliminaci\u00f3n permanente e irreversible. El contenido del sistema de archivos puede replicarse entre varios centros de datos en diferentes regiones. Los nodos de almacenamiento pueden incluir diferentes tipos de dispositivos (basados en discos y memoria flash). <\/p>\n

Uno de los requisitos durante el dise\u00f1o fue la ausencia de un solo punto de falla y garantizar una alta fiabilidad del almacenamiento \u2014 las interrupciones de energ\u00eda no deben causar da\u00f1os en el sistema de archivos, y los archivos no pueden quedar grabados parcialmente (solo los archivos completamente grabados est\u00e1n disponibles para lectura). El sistema es resistente a la falla de dispositivos individuales, nodos de metadatos y nodos de almacenamiento. Es posible realizar mantenimiento del almacenamiento sin interrumpir su funcionamiento. <\/p>\n

La implementaci\u00f3n del almacenamiento basado en TernFS en la empresa XTX Markets comenz\u00f3 en el verano de 2023, despu\u00e9s de un a\u00f1o y medio de desarrollo del sistema de archivos. A mediados de 2024, todos los sistemas de aprendizaje autom\u00e1tico de XTX Markets fueron trasladados a TernFS. Actualmente, el almacenamiento est\u00e1 compuesto por m\u00e1s de 30,000 discos y 10,000 dispositivos de memoria flash, ubicados en tres centros de datos. El volumen total de datos almacenados se estima en 500 petabytes, y el rendimiento m\u00e1ximo es de varios petabytes por segundo. El almacenamiento se utiliza en un cl\u00faster que cuenta con m\u00e1s de 100,000 nodos de computaci\u00f3n. No ha habido incidentes que hayan llevado a p\u00e9rdida de datos en dos a\u00f1os de operaci\u00f3n. <\/p>\n

Entre las limitaciones de TernFS: los archivos grabados no pueden ser modificados; baja eficiencia en el manejo de archivos de menos de 2 MB; bajo rendimiento en las operaciones de creaci\u00f3n y eliminaci\u00f3n de directorios; falta de separaci\u00f3n de derechos de acceso. <\/p>\n

Componentes que forman el cl\u00faster de almacenamiento TernFS: <\/p>\n