Facebook har återupptagit utvecklingen av minneshanteringsbiblioteket jemalloc

Meta* har meddelat att de återupptar utvecklingen av minneshanteringsbiblioteket jemalloc, vars repository arkiverades i juni förra året. Jemalloc-biblioteket erbjuder en alternativ implementering av malloc-funktioner, optimerad för att minska fragmentering och fungera på flerprocessor-system.

Det påpekas att Meta har insett fördelarna med att använda jemalloc i sin infrastruktur och har beslutat att återuppta arbetet med koden för detta bibliotek för att minska kostnaderna för underhåll, modernisering av kodbasen, eliminering av teknisk skuld och anpassning av allokeraren för nya typer av belastning och aktuell hårdvara. Utvecklingen kommer att fortsätta som ett öppet projekt som utvecklas tillsammans med communityt och välkomnar deltagande från externa parter.

Jemalloc-biblioteket utvecklades av Jason Evans 2005 för FreeBSD 7.0, och portades sedan till NetBSD och integrerades i Firefox. År 2009 började skaparen av jemalloc arbeta för Facebook, där detta bibliotek användes i interna projekt. År 2017 lämnade Jason Facebook, och utvecklingen fortsattes av det kvarvarande teamet från Facebook. Efter omdöpt till Meta förändrades företagets prioriteringar, utvecklingen av biblioteket stoppades, och arbetet fokuserades endast på interna behov, medan den offentliga kodbasen med tiden försämrades. För att hålla den offentliga biblioteket flytande krävdes en betydande omarbetning, men Jason var inte beredd att lägga tid på detta arbete och därför arkiverade han repositoryt för 10 månader sedan.

Bland de planer som Facebook har avsett att genomföra efter återuppvaknandet av projektet:

• Minska den tekniska skulden, genomföra refaktorering och rengöring av kodbasen, förbättra biblioteket för att säkerställa effektivitet, tillförlitlighet och användarvänlighet.
• Fortsatt utveckling av HPA (Huge-Page Allocator) för att optimera CPU-resursanvändning genom mer effektiv användning av stora minnessidor (transparent hugepage).
• Ändringar för att öka effektiviteten i minneshantering relaterade till förbättrad strukturpackning, cache och rensning av frigjorda minnesblock.
• Tillägg av optimeringar för AArch64-arkitektur (ARM64).

Källa: opennet.ru