La performance du paquet jq sous Ubuntu a pu être augmentée de 1,9 fois grâce à une reconstitution.

Les résultats de l'évaluation de l'impact sur la performance de la reconstruction des paquets pour Ubuntu avec différentes options et mises en œuvre des fonctions d'allocation de mémoire ont été publiés. L'expérimentateur a réussi à augmenter la performance du paquet jq, un outil de traitement de données au format JSON, de 90 % (1,9 fois) grâce à une reconstruction classique à partir du même paquet avec le code source, sans modifications du code lui-même. La performance a été évaluée en mesurant le temps d'exécution d'une requête filtrante standard sur des données GeoJSON de 500 Mo.

Résultats de l'expérience :

• La version compilée en GCC à partir des mêmes fichiers source avec les options par défaut s'est avérée plus rapide que le paquet binaire Ubuntu de 2 à 4 %.
• La reconstruction avec Clang 18 au niveau d'optimisation « -O3 », incluant l'optimisation au stade de l'édition de liens (« -flto ») et la désactivation des informations de débogage (« -DNDEBUG »), a entraîné une accélération de 20 %.
• La reconstruction avec le système de répartition de la mémoire TCMalloc (ajout de « -L/usr/lib/x86_64-linux-gnu -ltcmalloc_minimal » dans LDFLAGS) a conduit à une accélération de 40 %.
• Le remplacement des fonctions malloc par les systèmes de répartition de la mémoire tcmalloc, jemalloc et mimalloc via « LD_PRELOAD=/usr/lib/x86_64-linux-gnu/lib….so » a entraîné une augmentation de performance de 27 %, 29 % et 44 %. Lors de l'exécution avec mimalloc, qui a montré une accélération de 44 %, la variable d'environnement « MIMALLOC_LARGE_OS_PAGES=1 » a été définie.
• La reconstruction du paquet avec mimalloc dans LDFLAGS au lieu de l'édition de liens via LD_PRELOAD a conduit à une accélération de 90 % lors du test. Un autre test, portant sur le traitement de 2,2 Go de données JSON dans 13 000 fichiers, a également montré un gain de performance d'environ deux fois.

Source : opennet.ru