Alpine kompilearret Docker builds foar Python 50 kear stadiger, en ôfbyldings binne 2 kear swierder

Alpine kompilearret Docker builds foar Python 50 kear stadiger, en ôfbyldings binne 2 kear swierder

Alpine Linux wurdt faak oanrikkemandearre as basisôfbylding foar Docker. Jo wurde ferteld dat it brûken fan Alpine jo builds lytser sil meitsje en jo bouproses rapper.

Mar as jo Alpine Linux brûke foar Python-applikaasjes, dan is it:

  • Makket jo builds folle stadiger
  • Makket jo ôfbyldings grutter
  • Fergrieme dyn tiid
  • En op it lêst kin it flaters yn runtime feroarsaakje


Litte wy sjen nei wêrom Alpine wurdt oanrikkemandearre, mar wêrom moatte jo it noch net brûke mei Python.

Wêrom riede minsken Alpine oan?

Litte wy oannimme dat wy gcc nedich binne as diel fan ús ôfbylding en wy wolle Alpine Linux vs Ubuntu 18.04 fergelykje yn termen fan bousnelheid en definitive ôfbyldingsgrutte.

Litte wy earst twa ôfbyldings downloade en har grutte fergelykje:

$ docker pull --quiet ubuntu:18.04
docker.io/library/ubuntu:18.04
$ docker pull --quiet alpine
docker.io/library/alpine:latest
$ docker image ls ubuntu:18.04
REPOSITORY          TAG        IMAGE ID         SIZE
ubuntu              18.04      ccc6e87d482b     64.2MB
$ docker image ls alpine
REPOSITORY          TAG        IMAGE ID         SIZE
alpine              latest     e7d92cdc71fe     5.59MB

Sa't jo sjen kinne, is de basisôfbylding foar Alpine folle lytser. Litte wy no besykje gcc te ynstallearjen en te begjinnen mei Ubuntu:

FROM ubuntu:18.04
RUN apt-get update && 
    apt-get install --no-install-recommends -y gcc && 
    apt-get clean && rm -rf /var/lib/apt/lists/*

It perfekte Dockerfile skriuwe is bûten it berik fan dit artikel.

Litte wy de gearstallingssnelheid mjitte:

$ time docker build -t ubuntu-gcc -f Dockerfile.ubuntu --quiet .
sha256:b6a3ee33acb83148cd273b0098f4c7eed01a82f47eeb8f5bec775c26d4fe4aae

real    0m29.251s
user    0m0.032s
sys     0m0.026s
$ docker image ls ubuntu-gcc
REPOSITORY   TAG      IMAGE ID      CREATED         SIZE
ubuntu-gcc   latest   b6a3ee33acb8  9 seconds ago   150MB

Wy werhelje itselde foar Alpine (Dockerfile):

FROM alpine
RUN apk add --update gcc

Wy sammelje, sjogge nei de tiid en grutte fan 'e gearkomste:

$ time docker build -t alpine-gcc -f Dockerfile.alpine --quiet .
sha256:efd626923c1478ccde67db28911ef90799710e5b8125cf4ebb2b2ca200ae1ac3

real    0m15.461s
user    0m0.026s
sys     0m0.024s
$ docker image ls alpine-gcc
REPOSITORY   TAG      IMAGE ID       CREATED         SIZE
alpine-gcc   latest   efd626923c14   7 seconds ago   105MB

Lykas tasein, Alpine-basearre ôfbyldings wurde sammele flugger en binne lytser: 15 sekonden ynstee fan 30 en de ôfbylding grutte is 105MB fersus 150MB. It is moai goed!

Mar as wy oerstappe op it bouwen fan in Python-applikaasje, dan is alles net sa roze.

Python ôfbylding

Python-applikaasjes brûke faak pandas en matplotlib. Dêrom is ien opsje om de offisjele Debian-basearre ôfbylding te nimmen mei dizze Dockerfile:

FROM python:3.8-slim
RUN pip install --no-cache-dir matplotlib pandas

Litte wy it sammelje:

$ docker build -f Dockerfile.slim -t python-matpan.
Sending build context to Docker daemon  3.072kB
Step 1/2 : FROM python:3.8-slim
 ---> 036ea1506a85
Step 2/2 : RUN pip install --no-cache-dir matplotlib pandas
 ---> Running in 13739b2a0917
Collecting matplotlib
  Downloading matplotlib-3.1.2-cp38-cp38-manylinux1_x86_64.whl (13.1 MB)
Collecting pandas
  Downloading pandas-0.25.3-cp38-cp38-manylinux1_x86_64.whl (10.4 MB)
...
Successfully built b98b5dc06690
Successfully tagged python-matpan:latest

real    0m30.297s
user    0m0.043s
sys     0m0.020s

Wy krije in ôfbylding fan 363MB yn grutte.
Sille wy it better dwaan mei Alpine? Litte we it besykje:

FROM python:3.8-alpine
RUN pip install --no-cache-dir matplotlib pandas

$ docker build -t python-matpan-alpine -f Dockerfile.alpine .                                 
Sending build context to Docker daemon  3.072kB                                               
Step 1/2 : FROM python:3.8-alpine                                                             
 ---> a0ee0c90a0db                                                                            
Step 2/2 : RUN pip install --no-cache-dir matplotlib pandas                                                  
 ---> Running in 6740adad3729                                                                 
Collecting matplotlib                                                                         
  Downloading matplotlib-3.1.2.tar.gz (40.9 MB)                                               
    ERROR: Command errored out with exit status 1:                                            
     command: /usr/local/bin/python -c 'import sys, setuptools, tokenize; sys.argv[0] = '"'"'/
tmp/pip-install-a3olrixa/matplotlib/setup.py'"'"'; __file__='"'"'/tmp/pip-install-a3olrixa/matplotlib/setup.py'"'"';f=getattr(tokenize, '"'"'open'"'"', open)(__file__);code=f.read().replace('"'"'rn'"'"', '"'"'n'"'"');f.close();exec(compile(code, __file__, '"'"'exec'"'"'))' egg_info --egg-base /tmp/pip-install-a3olrixa/matplotlib/pip-egg-info                              

...
ERROR: Command errored out with exit status 1: python setup.py egg_info Check the logs for full command output.
The command '/bin/sh -c pip install matplotlib pandas' returned a non-zero code: 1

Wat is oan?

Alpine stipet gjin tsjillen

As jo ​​​​nei de bou sjogge, dy't basearre is op Debian, sille jo sjen dat it matplotlib-3.1.2-cp38-cp38-manylinux1_x86_64 downloade.whl.

Dit is in binêre foar tsjil . Alpine downloads de boarnen `matplotlib-3.1.2.tar.gz` om't it gjin standert stipet tsjillen.

Wêrom? De measte Linux-distribúsjes brûke de GNU-ferzje (glibc) fan 'e C-standertbibleteek, dy't feitlik fereaske is troch elk programma skreaun yn C, ynklusyf Python. Mar Alpine brûkt `musl`, en om't dy binaries binne ûntwurpen foar `glibc`, binne se gewoan gjin opsje.

Dêrom, as jo Alpine brûke, moatte jo alle koade kompilearje yn C yn elk Python-pakket.

Oh, ja, jo sille moatte sykje nei de list fan al sokke ôfhinklikens dy't moatte wurde gearstald sels.
Yn dit gefal krije wy dit:

FROM python:3.8-alpine
RUN apk --update add gcc build-base freetype-dev libpng-dev openblas-dev
RUN pip install --no-cache-dir matplotlib pandas

En de boutiid nimt ...

... 25 minuten 57 sekonden! En de ôfbyldingsgrutte is 851MB.

Alpine-basearre ôfbyldings nimme folle langer om te bouwen, se binne grutter yn grutte, en jo moatte noch altyd sykje nei alle ôfhinklikens. Jo kinne fansels ferminderje de gearkomste grutte brûkend multi-stage builds mar dat betsjut dat der noch mear wurk dien wurde moat.

Dat is net alles!

Alpine kin ûnferwachte bugs yn runtime feroarsaakje

  • Yn teory is musl kompatibel mei glibc, mar yn 'e praktyk kinne de ferskillen in protte problemen feroarsaakje. En as se binne, sille se wierskynlik onaangenaam wêze. Hjir binne wat problemen dy't foarkomme kinne:
  • Alpine hat standert in lytsere thread stack grutte, dat kin liede ta flaters yn Python
  • Guon brûkers hawwe dat fûn Python-applikaasjes binne stadiger fanwegen de manier wêrop musl ûnthâld allocearret (oars as glibc).
  • Ien fan 'e brûkers in flater fûn by it opmeitsjen fan de datum

Dy flaters binne grif al ferholpen, mar wa wit hoefolle der noch komme.

Brûk gjin Alpine-ôfbyldings foar Python

As jo ​​​​gjin lestich meitsje wolle mei grutte en lange builds, sykje nei ôfhinklikens en potinsjele flaters, brûk Alpine Linux net as basisôfbylding. Kies in goede basisôfbylding.

Boarne: www.habr.com

Add a comment