Първото стабилно издание на zlib-ng, високо производителен клон на zlib

Достъпен е релиз на библиотеката zlib-ng 2.0, който е означен като първият стабилен издание на проекта (веднага след него е наличен коригиращият релиз 2.0.1). Zlib-ng е съвместим с zlib на ниво API, но предлага допълнителни оптимизации, които не са приети в официалния репозитори на zlib поради консервативния подход към приемането на промените. Освен това е предложен модернизиран API, основан на zlib, но променен за опростяване на портването. Кодът на проекта е написан на езика Си и се разпространява под лицензия Zlib.

Проведените тестове на системи x86_64 показаха, че при изпълнението на операции с компресия, Zlib-ng е приблизително 4 пъти по-бърз от zlib и 2.1 пъти по-бърз от gzip. При разархивиране Zlib-ng е приблизително 2.4 пъти по-бърз от zlib и 1.8 пъти по-бърз от gzip. Значително повишаване на производителността при компресия/разархивиране е постигнато благодарение на използването на векторни инструкции SSE*, AVX2, VSX и Neon.

Включено е реализирането на алгоритъма за изчисляване на контрольни суми Adler32, оптимизирано с помощта на инструкции SSSE3, AVX2, Neon и VSX, реализация на CRC32-B на базата на PCLMULQDQ и ACLE, подобрени хеш-таблици, реализация на хеша Slide на базата на SSE2, AVX2, Neon и VSX, операции за сравнение на базата на SSE4.2 и AVX2. Включени са също насочени към повишаване на производителността промени, използвани в клоновете на компаниите Intel и Cloudflare. Оптимизирана е работата с буфери. Добавена е поддръжка за системите за изграждане CMake и NMake. За тестване са използвани системи за непрекъсната интеграция.

Освен оптимизациите, в Zlib-ng също така са включени натрупаните в пакетите дистрибуции корекции и е проведено почистване на кода от обходните решения, използвани в zlib за поддръжка на стари компилатори и платформи, които пречат на реализацията на по-ефективни методи (например, ограниченията, необходими за поддръжка на 16-битови системи и несъвместими с ANSI C компилатори). Проведена е работа по идентифициране и коригиране на грешки, открити от статични анализатори, системи за fuzzing-тестове и инструменти за откриване на проблеми с паметта (AddressSanitizer и MemorySanitizer).

Източник: opennet.ru