{"id":143998,"date":"2025-09-23T05:12:23","date_gmt":"2025-09-23T03:12:24","guid":{"rendered":"https:\/\/prohoster.info\/blog\/novosti-interneta\/otkryt-kod-raspredelyonnoj-fajlovoj-sistemy-ternfs"},"modified":"2025-09-23T05:12:23","modified_gmt":"2025-09-23T03:12:24","slug":"otkryt-kod-raspredelyonnoj-fajlovoj-sistemy-ternfs","status":"publish","type":"post","link":"https:\/\/prohoster.info\/hu\/blog\/news\/otkryt-kod-raspredelyonnoj-fajlovoj-sistemy-ternfs","title":{"rendered":"Megny\u00edlt a TernFS elosztott f\u00e1jlrendszer forr\u00e1sk\u00f3dja","gt_translate_keys":[{"key":"rendered","format":"text"}]},"content":{"rendered":"

Az XTX Markets c\u00e9g megnyitotta a TernFS f\u00e1jlrendszer forr\u00e1sk\u00f3dj\u00e1t, amelyet a f\u00f6ldrajzi elhelyezked\u00e9s\u00fckben elk\u00fcl\u00f6n\u00edtett adatk\u00f6zpontok k\u00f6z\u00f6tti elosztott t\u00e1rol\u00f3 l\u00e9trehoz\u00e1s\u00e1ra terveztek, \u00e9s amely k\u00e9pes ak\u00e1r t\u00f6bb exab\u00e1jt adat t\u00e1rol\u00e1s\u00e1ra, trilli\u00f3 f\u00e1jlra \u00e9s t\u00f6bb milli\u00e1rd k\u00f6nyvt\u00e1rra, amelyeket egyszerre milli\u00f3k \u00e9rhetnek el. A projekt k\u00f3dja C++ \u00e9s Go nyelveken \u00edr\u00f3dott, \u00e9s GPLv2 licenc alatt ker\u00fcl forgalomba. A protokoll specifik\u00e1ci\u00f3k \u00e9s a kliens k\u00f6nyvt\u00e1rak Apache 2.0 licenc alatt \u00e1llnak rendelkez\u00e9sre. <\/p>\n

A f\u00e1jlrendszer optimaliz\u00e1lva van a g\u00e9pi tanul\u00e1si rendszerekre jellemz\u0151 terhekre \u2014 f\u00e1jlok \u00edr\u00e1s\u00e1ra \u00e9s olvas\u00e1s\u00e1ra, amelyek l\u00e9trehoz\u00e1suk ut\u00e1n nem m\u00f3dosulnak, \u00e9s t\u00f6bb megab\u00e1jt adatot tartalmaznak. A f\u00e1jlrendszer nem ide\u00e1lis az \u00faj k\u00f6nyvt\u00e1rak gyakori l\u00e9trehoz\u00e1s\u00e1ra \u00e9s a f\u00e1jlok gyakori \u00e1thelyez\u00e9s\u00e9re k\u00f6nyvt\u00e1rak k\u00f6z\u00f6tt. Van lehet\u0151s\u00e9g t\u00f6rl\u00e9s \u00fatj\u00e1n v\u00e9letlen\u00fcl elt\u0171nt f\u00e1jlok vagy k\u00f6nyvt\u00e1rak helyre\u00e1ll\u00edt\u00e1s\u00e1ra, valamint v\u00e9glegesen elt\u00e1vol\u00edtand\u00f3 f\u00e1jlok politik\u00e1j\u00e1nak be\u00e1ll\u00edt\u00e1s\u00e1ra. A f\u00e1jlrendszer tartalm\u00e1t k\u00fcl\u00f6nb\u00f6z\u0151 r\u00e9gi\u00f3kban t\u00f6bb adatk\u00f6zpont k\u00f6z\u00f6tt lehet m\u00e1solni. A t\u00e1rol\u00f3csom\u00f3pontok k\u00fcl\u00f6nb\u00f6z\u0151 t\u00edpus\u00fa t\u00e1rol\u00f3kat (meghajt\u00f3kon \u00e9s flash mem\u00f3ri\u00e1n alapulva) tartalmazhatnak. <\/p>\n

A tervez\u00e9s egyik k\u00f6vetelm\u00e9nye a k\u00f6z\u00e9pponti meghib\u00e1sod\u00e1s hi\u00e1nya volt, \u00e9s a t\u00e1rol\u00e1s magas megb\u00edzhat\u00f3s\u00e1g\u00e1nak biztos\u00edt\u00e1sa \u2014 az \u00e1ramkimarad\u00e1soknak nem szabad k\u00e1ros\u00edtaniuk a f\u00e1jlrendszert, \u00e9s a f\u00e1jlok nem lehetnek r\u00e9szlegesen r\u00f6gz\u00edtve (csak teljesen r\u00f6gz\u00edtett f\u00e1jlok \u00e9rhet\u0151k el olvas\u00e1sra). A rendszer ellen\u00e1ll a k\u00fcl\u00f6nb\u00f6z\u0151 t\u00e1rol\u00f3k, metadat csom\u00f3pontok \u00e9s a t\u00e1rol\u00f3csom\u00f3pontok meghib\u00e1sod\u00e1s\u00e1nak. A t\u00e1rol\u00f3 karbantart\u00e1sa le\u00e1ll\u00edt\u00e1s n\u00e9lk\u00fcli \u00fczemeltet\u00e9ssel is elv\u00e9gezhet\u0151. <\/p>\n

A TernFS alap\u00fa t\u00e1rol\u00f3 XTX Markets-n\u00e9l 2023 nyar\u00e1n kezd\u0151d\u00f6tt, m\u00e1sf\u00e9l \u00e9v fejleszt\u00e9st k\u00f6vet\u0151en. 2024 k\u00f6zep\u00e9re az \u00f6sszes g\u00e9pi tanul\u00e1si rendszer \u00e1t lett \u00e1ll\u00edtva a TernFS-re. Jelenleg a t\u00e1rol\u00f3 t\u00f6bb mint 30 ezer meghajt\u00f3b\u00f3l \u00e9s 10 ezer Flash-t\u00e1rol\u00f3b\u00f3l \u00e1ll, amelyek h\u00e1rom adatk\u00f6zpontban helyezkednek el. A t\u00e1rolt adatok \u00f6sszes\u00edtett mennyis\u00e9ge 500 petab\u00e1tra becs\u00fclhet\u0151, a cs\u00facs teljes\u00edtm\u00e9ny pedig t\u00f6bb petab\u00e1jt m\u00e1sodpercenk\u00e9nt. A t\u00e1rol\u00f3 t\u00f6bb mint 100 ezer sz\u00e1m\u00edt\u00e1si csom\u00f3pontot tartalmaz\u00f3 klaszterben ker\u00fcl felhaszn\u00e1l\u00e1sra. K\u00e9t \u00e9v \u00fczemeltet\u00e9s alatt adatveszt\u00e9st okoz\u00f3 esem\u00e9ny nem fordult el\u0151. <\/p>\n

A TernFS korl\u00e1toz\u00e1sai k\u00f6z\u00e9 tartozik: a r\u00f6gz\u00edtett f\u00e1jlok nem m\u00f3dos\u00edthat\u00f3k; alacsony hat\u00e9konys\u00e1g a 2 MB-n\u00e1l kisebb f\u00e1jlokkal; alacsony teljes\u00edtm\u00e9ny a k\u00f6nyvt\u00e1rak l\u00e9trehoz\u00e1sa \u00e9s t\u00f6rl\u00e9se sor\u00e1n; a hozz\u00e1f\u00e9r\u00e9si jogok elv\u00e1laszt\u00e1s\u00e1nak hi\u00e1nya. <\/p>\n

A TernFS t\u00e1rol\u00f3klauster \u00f6sszetev\u0151i: <\/p>\n