Проект Gentoo представи система за управление на пакети Portage 3.0

Стабилизиран освобождаване на системата за управление на пакети Portage 3.0, използвана в дистрибуцията Gentoo Linux. Представената версия обобщава дългогодишната работа по преминаването на Python 3 и спирането на поддръжката на Python 2.7.

В допълнение към спирането на поддръжката на Python 2.7, другото важно изменение беше включването на оптимизации, които успяха да ускорят изчисленията, свързани с определянето на зависимости, с 50-60%. Интересно е, че някои разработчици предложиха да пренапишат кода за разрешаване на зависимости на C/C++ или Go за ускоряване на работата му, но проблемът беше решен с минимални усилия.

Провеждането на профилиране на съществуващия код показа, че основното време по време на изчисленията се губи при извикването на функциите use_reduce и catpkgsplit с повтарящи се набори от аргументи (например, функцията catpkgsplit беше извиквана от 1 до 5 милиона пъти). За ускорение беше приложено кеширане на резултатите от работата на тези функции с използване на речници. Най-добрият вариант за съхранение на кеша беше вградената функция lru_cache, но тя беше налична само в версиите на Python, започвайки от 3.2. За съвместимост с по-ранни версии беше добавена заглушка, която заменя lru_cache, но решението за спиране на поддръжката на Python 2.7 в Portage 3.0 значително облекчи задачата и позволи да се заобиколи тази прослойка.

Използването на кеша позволи да се намали времето за изпълнение на операцията „emerge -uDvpU —with-bdeps=y @world“ на лаптоп ThinkPad X220 от 5 минути 20 секунди до 3 минути 16 секунди (63%). Тестовете на други системи показаха увеличение на производителността не по-малко от 48%.

Разработчикът, който подготви изменението, също се опита да реализира прототип на кода за разрешаване на зависимости на C++ или Rust, но задачата се оказа твърде сложна, тъй като изискваше пренос на голям обем код и, освен това, вероятността получените резултати да оправдаят инвестираните усилия бе съмнителна.

Източник: opennet.ru