Facebook публикува системата за изграждане Buck2

Facebook представи нова система за изграждане, Buck2, фокусирана върху изграждането на проекти от много големи хранилища, които включват код на различни езици за програмиране. Ключовите разлики между новата реализация и системата Buck, използвана преди това от Facebook, са използването на езика Rust вместо Java и значително увеличение на ефективността и производителността на процеса на асемблиране (при вътрешни тестове в същата инфраструктура Buck2 извършва асемблиране задачи два пъти по-бързо от Buck). Кодът се разпространява под лиценз Apache 2.0.

Системата не е обвързана с код за изграждане на определени езици и извън кутията поддържа проекти за изграждане, написани на C++, Python, Rust, Kotlin, Erlang, Swift, Objective-C, Haskell и OCaml, използвани от Facebook. Езикът Starlark, базиран на Python (като в Bazel), се използва за проектиране на добавки, изграждане на скриптове и правила. Starlark ви позволява да разширите възможностите на системата за изграждане и да се абстрахирате от специфичните езици, използвани в изгражданите проекти.

Високата производителност се постига чрез кеширане на резултатите, паралелизиране на работата и поддръжка за дистанционно изпълнение на задачи (Remote Build Execution). В средата за изграждане се използва концепцията за "стегнатост" - компилираният код е отрязан от външния свят, нищо не се зарежда отвън по време на процеса на изграждане и многократното изпълнение на работа на различни системи води до същия резултат ( повтарящи се компилации, например, резултатът от изграждането на проект на машината на разработчика ще бъде точно същият като компилацията на сървъра за непрекъсната интеграция). Ситуацията на липса на зависимост се възприема в Buck2 като грешка.

Основни характеристики на Buck2:

• Правилата за поддръжка на езици за програмиране и ядрото на системата за изграждане са напълно разделени. Правилата са написани на езика Starlark, а инструментариумът и изпълнението на Starlark са написани на Rust.
• Системата за изграждане използва единична графика на нарастваща зависимост (без разделяне на етапи), което ви позволява да увеличите дълбочината на паралелизиране на работата в сравнение с Buck и Bazel и да избегнете много видове грешки.
• Кодът на Buck2, публикуван в GitHub, и правилата за поддръжка на езика за програмиране са почти идентични с вътрешната версия, използвана в инфраструктурата на Facebook (единствените разлики са в обвързването с изданията на компилатора и сървърите за изграждане, използвани от Facebook).
• Системата за изграждане е проектирана с оглед на интеграция със системи за отдалечено изпълнение на задачи, които ви позволяват да изпълнявате задачи на отдалечени сървъри. API за отдалечено изпълнение е съвместим с Bazel и е тестван за съвместимост с Buildbarn и EngFlow.
• Осигурява се интеграция с виртуални файлови системи, в които се представя съдържанието на цялото хранилище, но всъщност се работи с действителния локален срез на част от хранилището (разработчикът вижда цялото хранилище, но само необходимия файловете, до които има достъп, се извличат от хранилището). Поддържат се VFS, базирани на EdenFS и Git LFS, които се използват от Sapling.

Източник: opennet.ru