GitLab Shell Runner. Konkurruese e ekzekutimit të shërbimeve të testuara me ndihmën e Docker Compose

GitLab Shell Runner. Konkurruese e ekzekutimit të shërbimeve të testuara me ndihmën e Docker Compose

Ky artikull do të jetë i dobishëm për testuesit dhe zhvilluesit, por është kryesisht i përgatitur për automatizuesit që janë përballur me problemin e konfigurimit të GitLab CI/CD për kryerjen e testimeve integruese në kushte të mungesës së burimeve infrastrukturore dhe/ose të mungesës së një platforme për orkestrimin e kontejnerëve. Do të tregoj si të konfiguroj implementimin e mjediseve të testuara me ndihmën e docker compose në një GitLab shell runner të vetëm dhe që, gjatë implementimit të disa mjediseve, shërbimet që do të ekzekutohen të mos pengojnë njëra-tjetrën.


Përmbajtja

Parakushtet

  1. Në praktikën time, shpesh herë është dashur të "shëroj" testimin integrues në projekte. Dhe shpeshherë problemi i parë dhe më i rëndësishëm është pipeline-i CI, në të cilin testimi integrues i shërbimit(ve) të zhvilluar bëhet në mjedisin dev/stage. Kjo shkaktonte shumë probleme: Për shkak të defekteve në një shërbim ose tjetër gjatë testimit integrues, konturi testues mund të prishte të dhënat e panevojshme. Ka pasur raste kur dërgimi i një kërkese me format JSON të prishur ngadalësonte shërbimin, duke e çuar plotësisht në një gjendje jo funksionale.

    • NgadalĂ«simi i punĂ«s sĂ« konturit testues me rritjen e tĂ« dhĂ«nave testuese. Mendoj se nuk ka nevojĂ« tĂ« pĂ«rshkruaj njĂ« shembull me pastrimin/rĂ«rgimin e BD-sĂ«. NĂ« praktikĂ«n time nuk kam hasur nĂ« ndonjĂ« projekt ku kjo procedurĂ« tĂ« kalonte pa pengesa.
    • Rreziku pĂ«r tĂ« prishur funksionimin e konturit testues gjatĂ« testimit tĂ« konfigurimeve tĂ« pĂ«rbashkĂ«ta tĂ« sistemit. PĂ«r shembull, user/group/password/application policy.
    • TĂ« dhĂ«nat testuese nga testet automatike pengojnĂ« punĂ«n e testuesve manualĂ«.
    • Dikush do tĂ« thotĂ« se testet e mira automatikisht duhet tĂ« pastrojnĂ« tĂ« dhĂ«nat pas vetes. Kam argumente kundĂ«r:

    Stendat dinamike janë shumë të përshtatshme për t'u përdorur.

    • Nuk çdo objekt mund tĂ« fshihet nga sistemi pĂ«rmes API. PĂ«r shembull, thirrja pĂ«r fshirjen e njĂ« objekti nuk Ă«shtĂ« e realizuar, pasi i bie ndesh biznes logjikĂ«s.
    • NĂ« krijimin e njĂ« objekti pĂ«rmes API, mund tĂ« krijohet njĂ« sasi e madhe tĂ« metadatat qĂ« janĂ« problematike pĂ«r t'u fshirĂ«.
    • GjatĂ« krijimit tĂ« njĂ« objekti pĂ«rmes API, mund tĂ« krijohet njĂ« sasi e madhe metadatatsh qĂ« janĂ« problematike pĂ«r t'u fshirĂ«.
    • NĂ«se testet kanĂ« varĂ«si mes tyre, procesi i pastrimit tĂ« tĂ« dhĂ«nave pas ekzekutimit tĂ« testeve kthehet nĂ« njĂ« dhimbje koke.
    • Thirrje shtesĂ« (dhe, sipas mendimit tim, tĂ« paarsyetuara) ndaj API-sĂ«.
    • Dhe argumenti kryesor: kur tĂ« dhĂ«nat testuese fillojnĂ« tĂ« pastrohen direkt nga DB. Kjo shndĂ«rrohet nĂ« njĂ« cirk tĂ« vĂ«rtetĂ« PK/FK! Nga zhvilluesit dĂ«gjohet: "VetĂ«m shtova/fshiva/riformova njĂ« tabelĂ«, pse 100500 teste integruese dĂ«shtuan?"

    Sipas mendimit tim, zgjidhja më optimale është një mjedis dinamik.

  2. Shumë njerëz përdorin docker-compose për të nisur mjedisin e testimit, por pak e përdorin docker-compose gjatë zhvillimit të testeve integruese në CI/CD. Dhe këtu nuk po marr parasysh kubernetes, swarm dhe platforma të tjera orkestrimi të konteinerëve. Nuk është në çdo kompani. Do të ishte mirë nëse docker-compose.yml do të ishte universale.
  3. Nëse madje kemi një QA runner, si mund ta bëjmë që shërbimet e lançuara përmes docker-compose të mos pengojnë njëra-tjetrën?
  4. Si të mbledhim log-et e shërbimeve që po testohen?
  5. Si të pastrojmë runner-in?

Kam një GitLab runner për projektet e mia dhe me këto pyetje kam përballur gjatë zhvillimit. Java klienti për TestRail. Më saktë gjatë ekzekutimit të testeve integruese. Këtu do t'i zgjidhim këto çështje me shembuj nga ky projekt.

Te përmbajtja

GitLab Shell Runner

Për runner-in rekomandoj një makinë virtuale Linux me 4 vCPU, 4 GB RAM, 50 GB HDD.
Në hapësirat e internetit ka shumë informacion për konfigurimin e gitlab-runner, prandaj shkurtimisht:

  • Hyn nĂ« makinĂ«n pĂ«rmes SSH.
  • NĂ«se keni mĂ« pak se 8 GB RAM, rekomandoj tĂ« bĂ«ni swap 10 GB, pĂ«r tĂ« mos pasur OOM killer qĂ« tĂ« vrasĂ« detyrat pĂ«r shkak tĂ« mungesĂ«s sĂ« RAM. Kjo mund tĂ« ndodhĂ« kur ekzekutohen mĂ« shumĂ« se 5 detyra nĂ« tĂ« njĂ«jtĂ«n kohĂ«. Detyrat do tĂ« pĂ«rfundojnĂ« mĂ« ngadalĂ«, por me siguri.

    Shembulli me OOM killer

    Nëse në log-et e detyrës sheh bash: line 82: 26474 Killed, thjesht kryej në runner sudo dmesg | grep 26474

    [26474]  1002 26474  1061935   123806     339        0             0 java
    Mungesë kujtesë: Vrit procesin 26474 (java) pikë 127 ose sakrifiko fëmijën
    I vrarë procesi 26474 (java) total-vm:4247740kB, anon-rss:495224kB, file-rss:0kB, shmem-rss:0kB

    Dhe nëse pamja duket kështu, atëherë ose shtoni swap, ose shtoni RAM.

  • InstalojmĂ« gitlab-runner, docker, docker-compose, bĂ«je.
  • Shtoni pĂ«rdoruesin gitlab-runner nĂ« grupin docker
    sudo groupadd docker
    sudo usermod -aG docker gitlab-runner
  • Regjistroheni gitlab-runner.
  • Hapni pĂ«r editim /etc/gitlab-runner/config.toml dhe shtoni

    concurrent=20
    [[runners]]
      request_concurrency = 10

    Kjo do të lejojë ekzekutimin e detyrave paralelisht në një ekzekutues. Lexoni më shumë në detaje këtu.
    Nëse keni një makinë më të fuqishme, për shembull 8 vCPU, 16 GB RAM, atëherë këto numra mund të dyfishohen të paktën. Por gjithçka varet nga ajo se çfarë do të ekzekutohet konkretisht në këtë ekzekutues dhe në çfarë sasi.

Ky është i mjaftueshëm.

Te përmbajtja

Përgatitja e docker-compose.yml

Detyra kryesore është një docker-compose.yml universal, i cili mund të përdoret nga zhvilluesit/testuesit si në nivel lokal ashtu edhe në pipeline-n CI.

Së pari, ne krijojmë emra unikë shërbimesh për CI. Një nga variablat unikë në GitLab CI është variabli CI_JOB_ID. Nëse përcaktoni container_name me vlerën "service-${CI_JOB_ID:-local}", atëherë në rastin e:

  • nĂ«se CI_JOB_ID nuk Ă«shtĂ« pĂ«rcaktuar nĂ« variablat e mjedisit,
    emri i shërbimit do të jetë service-local
  • nĂ«se CI_JOB_ID Ă«shtĂ« pĂ«rcaktuar nĂ« variablat e mjedisit (pĂ«r shembull 123),
    emri i shërbimit do të jetë service-123

Së dyti, ne krijojmë një rrjet të përbashkët për shërbimet që ekzekutohen. Kjo na jep izolim në nivelin e rrjetit kur ekzekutojmë disa mjedise testimi.

networks:
  default:
    external:
      name: service-network-${CI_JOB_ID:-local}

Kjo në thelb është hapi i parë drejt suksesit =)

Shembulli im i docker-compose.yml me komente

version: "3"

# Për funksionimin e saktë të web (php) dhe fmt, është e nevojshme
# që kontejnerët të kenë përmbajtje ekzekutuese të përbashkët.
# Në rastin tonë, kjo është direktoria /var/www/testrail
volumes:
  static-content:

# Izolojmë mjedisin në nivelin e rrjetit
networks:
  default:
    external:
      name: testrail-network-${CI_JOB_ID:-local}

services:
  db:
    image: mysql:5.7.22
    # Çdo container_name pĂ«rmban ${CI_JOB_ID:-local}
    container_name: "testrail-mysql-${CI_JOB_ID:-local}"
    environment:
      MYSQL_HOST: db
      MYSQL_DATABASE: mydb
      MYSQL_ROOT_PASSWORD: 1234
      SKIP_GRANT_TABLES: 1
      SKIP_NETWORKING: 1
      SERVICE_TAGS: dev
      SERVICE_NAME: mysql
    networks:
    - default

  migration:
    image: registry.gitlab.com/touchbit/image/testrail/migration:latest
    container_name: "testrail-migration-${CI_JOB_ID:-local}"
    links:
    - db
    depends_on:
    - db
    networks:
    - default

  fpm:
    image: registry.gitlab.com/touchbit/image/testrail/fpm:latest
    container_name: "testrail-fpm-${CI_JOB_ID:-local}"
    volumes:
    - static-content:/var/www/testrail
    links:
    - db
    networks:
    - default

  web:
    image: registry.gitlab.com/touchbit/image/testrail/web:latest
    container_name: "testrail-web-${CI_JOB_ID:-local}"
    # Nëse variablat TR_HTTP_PORT ose TR_HTTPS_PORTS nuk janë të përcaktuar,
    # shërbimi ngrihet në portet 80 dhe 443 përkatësisht.
    ports:
      - ${TR_HTTP_PORT:-80}:80
      - ${TR_HTTPS_PORT:-443}:443
    volumes:
      - static-content:/var/www/testrail
    links:
      - db
      - fpm
    networks:
      - default

Shembulli i ekzekutimit lokal

docker-compose -f docker-compose.yml up -d
Fillimi   testrail-mysql-local     ... përfundoi
Fillimi   testrail-migration-local ... përfundoi
Fillimi   testrail-fpm-local       ... përfundoi
Rikrijimi testrail-web-local       ... përfundoi

Por nuk është aq e thjeshtë me ekzekutimin në CI.

Te përmbajtja

Përgatitja e Makefile

Unë përdor Makefile sepse është shumë e dobishme për menaxhimin lokal të ambientit, si dhe në CI. Më pas komentet inline.

# ĐŁ ĐŒĐ”ĐœŃ ĐČ ĐżŃ€ĐŸĐ”Đșтах ĐČсД ĐČŃĐżĐŸĐŒĐŸĐłĐ°Ń‚Đ”Đ»ŃŒĐœŃ‹Đ” ĐČДщО лДжат ĐČ ĐŽĐžŃ€Đ”ĐșŃ‚ĐŸŃ€ĐžĐž `.indirect`,
# ĐČ Ń‚ĐŸĐŒ чОслД Đž `docker-compose.yml`

# Đ˜ŃĐżĐŸĐ»ŃŒĐ·ĐŸĐČать bash с ĐŸĐżŃ†ĐžĐ”Đč pipefail 
# pipefail - фДĐčлОт ĐČŃ‹ĐżĐŸĐ»ĐœĐ”ĐœĐžĐ” паĐčпа, ДслО ĐșĐŸĐŒĐ°ĐœĐŽĐ° ĐČŃ‹ĐżĐŸĐ»ĐœĐžĐ»Đ°ŃŃŒ с ĐŸŃˆĐžĐ±ĐșĐŸĐč
SHELL=/bin/bash -o pipefail

# ĐžŃŃ‚Đ°ĐœĐ°ĐČлОĐČĐ°Đ”ĐŒ ĐșĐŸĐœŃ‚Đ”ĐčĐœĐ”Ń€Ń‹ Đž ŃƒĐŽĐ°Đ»ŃĐ”ĐŒ ŃĐ”Ń‚ŃŒ
docker-kill:
    docker-compose -f $${CI_JOB_ID:-.indirect}/docker-compose.yml kill
    docker network rm network-$${CI_JOB_ID:-testrail} || true

# ĐŸŃ€Đ”ĐŽĐČĐ°Ń€ĐžŃ‚Đ”Đ»ŃŒĐœĐŸ ĐČŃ‹ĐżĐŸĐ»ĐœŃĐ”ĐŒ docker-kill 
docker-up: docker-kill
    # ĐĄĐŸĐ·ĐŽĐ°Đ”ĐŒ ŃĐ”Ń‚ŃŒ ĐŽĐ»Ń ĐŸĐșŃ€ŃƒĐ¶Đ”ĐœĐžŃ 
    docker network create network-$${CI_JOB_ID:-testrail}
    # Đ—Đ°Đ±ĐžŃ€Đ°Đ”ĐŒ ĐżĐŸŃĐ»Đ”ĐŽĐœĐžĐ” ĐŸĐ±Ń€Đ°Đ·Ń‹ Оз docker-registry
    docker-compose -f $${CI_JOB_ID:-.indirect}/docker-compose.yml pull
    # ЗапусĐșĐ°Đ”ĐŒ ĐŸĐșŃ€ŃƒĐ¶Đ”ĐœĐžĐ”
    # force-recreate - ĐżŃ€ĐžĐœŃƒĐŽĐžŃ‚Đ”Đ»ŃŒĐœĐŸĐ” ĐżĐ”Ń€Đ”ŃĐŸĐ·ĐŽĐ°ĐœĐžĐ” ĐșĐŸĐœŃ‚Đ”ĐčĐœĐ”Ń€ĐŸĐČ
    # renew-anon-volumes - ĐœĐ” ĐžŃĐżĐŸĐ»ŃŒĐ·ĐŸĐČать volumes ĐżŃ€Đ”ĐŽŃ‹ĐŽŃƒŃ‰ĐžŃ… ĐșĐŸĐœŃ‚Đ”ĐčĐœĐ”Ń€ĐŸĐČ
    docker-compose -f $${CI_JOB_ID:-.indirect}/docker-compose.yml up --force-recreate --renew-anon-volumes -d
    # Ну Đž, ĐœĐ° ĐČсяĐșĐžĐč ŃĐ»ŃƒŃ‡Đ°Đč, ĐČыĐČДстО Ń‡Ń‚ĐŸ Ń‚Đ°ĐŒ у ĐœĐ°Ń ĐČ ĐżŃ€ĐžĐœŃ†ĐžĐżĐ” Đ·Đ°ĐżŃƒŃ‰Đ”ĐœĐŸ ĐœĐ° ĐŒĐ°ŃˆĐžĐœĐșĐ”
    docker ps

# ĐšĐŸĐ»Đ»Đ”ĐșŃ‚ĐžĐŒ Đ»ĐŸĐłĐž сДрĐČĐžŃĐŸĐČ
docker-logs:
    mkdir ./logs || true
    docker logs testrail-web-$${CI_JOB_ID:-local}       >& logs/testrail-web.log
    docker logs testrail-fpm-$${CI_JOB_ID:-local}       >& logs/testrail-fpm.log
    docker logs testrail-migration-$${CI_JOB_ID:-local} >& logs/testrail-migration.log
    docker logs testrail-mysql-$${CI_JOB_ID:-local}     >& logs/testrail-mysql.log

# ОчостĐșа Ń€Đ°ĐœĐœĐ”Ń€Đ°
docker-clean:
    @echo ĐžŃŃ‚Đ°ĐœĐ°ĐČлОĐČĐ°Đ”ĐŒ ĐČсД testrail-ĐșĐŸĐœŃ‚Đ”ĐčĐœĐ”Ń€Ń‹
    docker kill $$(docker ps --filter=name=testrail -q) || true
    @echo ОчостĐșа ĐŽĐŸĐșДр ĐșĐŸĐœŃ‚Đ”ĐčĐœĐ”Ń€ĐŸĐČ
    docker rm -f $$(docker ps -a -f --filter=name=testrail status=exited -q) || true
    @echo ОчостĐșа dangling ĐŸĐ±Ń€Đ°Đ·ĐŸĐČ
    docker rmi -f $$(docker images -f "dangling=true" -q) || true
    @echo ОчостĐșа testrail ĐŸĐ±Ń€Đ°Đ·ĐŸĐČ
    docker rmi -f $$(docker images --filter=reference='registry.gitlab.com/touchbit/image/testrail/*' -q) || true
    @echo ОчостĐșа ĐČсДх ĐœĐ”ĐžŃĐżĐŸĐ»ŃŒĐ·ŃƒĐ”ĐŒŃ‹Ń… volume
    docker volume rm -f $$(docker volume ls -q) || true
    @echo ОчостĐșа ĐČсДх testrail сДтДĐč
    docker network rm $(docker network ls --filter=name=testrail -q) || true
    docker ps

Po kontrollojmë

make docker-up

$ make docker-up 
docker-compose -f ${CI_JOB_ID:-.indirect}/docker-compose.yml kill
Po vrasim testrail-web-local ... përfunduar
Po vrasim testrail-fpm-local ... përfunduar
Po vrasim testrail-mysql-local ... përfunduar
docker network rm network-${CI_JOB_ID:-testrail} || true
network-testrail
docker network create network-${CI_JOB_ID:-testrail}
d2ec063324081c8bbc1b08fd92242c2ea59d70cf4025fab8efcbc5c6360f083f
docker-compose -f ${CI_JOB_ID:-.indirect}/docker-compose.yml pull
Po shkarkoj db ... përfunduar
Po shkarkoj migrimin ... përfunduar
Po shkarkoj fpm ... përfunduar
Po shkarkoj web ... përfunduar
docker-compose -f ${CI_JOB_ID:-.indirect}/docker-compose.yml up --force-recreate --renew-anon-volumes -d
Po krijoj përsëri testrail-mysql-local ... përfunduar
Po krijoj përsëri testrail-fpm-local ... përfunduar
Po krijoj përsëri testrail-migrimin-local ... përfunduar
Po krijoj përsëri testrail-web-local ... përfunduar
docker ps
ID KONTEJNERI  PORTAT                                           EMRA
a845d3cb0e5a  0.0.0.0:80->80/tcp, 0.0.0.0:443->443/tcp  testrail-web-local
19d8ef001398  9000/tcp                                  testrail-fpm-local
e28840a2369c  3306/tcp, 33060/tcp                       testrail-migrimin-local
0e7900c23f37  3306/tcp                                  testrail-mysql-local

make docker-logs

$ make docker-logs
mkdir ./logs || true
mkdir: nuk mund tĂ« krijoj direktorinĂ« ‘./logs’: Direktorija ekziston
docker logs testrail-web-${CI_JOB_ID:-local}       > logs/testrail-web.log
docker logs testrail-fpm-${CI_JOB_ID:-local}       > logs/testrail-fpm.log
docker logs testrail-migrimin-${CI_JOB_ID:-local} > logs/testrail-migration.log
docker logs testrail-mysql-${CI_JOB_ID:-local}     > logs/testrail-mysql.log

GitLab Shell Runner. Konkurruese e ekzekutimit të shërbimeve të testuara me ndihmën e Docker Compose

Te përmbajtja

Përgatitja e .gitlab-ci.yml

Ekzekutimi i testeve integruese

Integrimi:
  faza: test
  tags:
    - my-shell-runner
  para-script:
    # Autentikimi në registry
    - docker login -u gitlab-ci-token -p ${CI_JOB_TOKEN} ${CI_REGISTRY}
    # Gjenerimi i TR_HTTP_PORT dhe TR_HTTPS_PORT pseudo-unik
    - export TR_HTTP_PORT=$(shuf -i10000-60000 -n1)
    - export TR_HTTPS_PORT=$(shuf -i10000-60000 -n1)
    # krijo një direktori me identifikuesin e detyrës
    - mkdir ${CI_JOB_ID}
    # kopjoni docker-compose.yml nĂ« ЎОрДĐșŃ‚ĐŸŃ€ĐžŃŽ
    # në mënyrë që konteksti të jetë ndryshe për çdo detyrë
    - cp .indirect/docker-compose.yml ${CI_JOB_ID}/docker-compose.yml
  script:
    # ngritja e ambientit tonë
    - make docker-up
    # ekzekutimi i testeve nga jar i ekzekutueshëm (kështu e bëj unë)
    - java -jar itest.jar --http-port ${TR_HTTP_PORT} --https-port ${TR_HTTPS_PORT}
    # ose brenda konteinerit
    - docker run --network=testrail-network-${CI_JOB_ID:-local} --rm itest
  pas-script:
    # grumbullo logët
    - make docker-logs
    # ndaluam ambientin
    - make docker-kill
  artefakte:
    # ruajmë logët
    kur: gjithmonë
    rrugët:
      - logs
    skadojnë në: 30 ditë

Si rezultat i ekzekutimit tĂ« njĂ« detyre tĂ« tillĂ«, direktoria logs nĂ« artefakte do tĂ« pĂ«rmbajĂ« logĂ«t e shĂ«rbimeve dhe testeve. Kjo Ă«shtĂ« shumĂ« e dobishme nĂ« rastin e gabimeve. Çdo test nĂ« paralel shkruan log-un e vet, por pĂ«r kĂ«tĂ« do tĂ« flas mĂ« vonĂ«.

GitLab Shell Runner. Konkurruese e ekzekutimit të shërbimeve të testuara me ndihmën e Docker Compose

Te përmbajtja

Pastrimi i runner-it

Detyra do të ekzekutohet vetëm sipas një grafiku.

fazat:
- pastrimi
- ndërtimi
- test

Pastruesi i ndihmës:
  faza: pastrim
  vetëm:
    - orare
  tags:
    - my-shell-runner
  script:
    - make docker-clean

Më pas kalojmë në projektin tonë GitLab -> CI/CD -> Oraret -> Orari i Ri dhe shtojmë një orar të ri

GitLab Shell Runner. Konkurruese e ekzekutimit të shërbimeve të testuara me ndihmën e Docker Compose

Te përmbajtja

Rezultati

Nisim 4 detyra në GitLab CI
GitLab Shell Runner. Konkurruese e ekzekutimit të shërbimeve të testuara me ndihmën e Docker Compose

Në regjistrat e detyrës së fundit me testet e integrimit shohim kontejnerët nga detyra të ndryshme

ID KONTEJNERA  EMRAT
c6b76f9135ed  testrail-web-204645172
01d303262d8e  testrail-fpm-204645172
2cdab1edbf6a  testrail-migration-204645172
826aaf7c0a29  testrail-mysql-204645172
6dbb3fae0322  testrail-web-204645084
3540f8d448ce  testrail-fpm-204645084
70fea72aa10d  testrail-mysql-204645084
d8aa24b2892d  testrail-web-204644881
6d4ccd910fad  testrail-fpm-204644881
685d8023a3ec  testrail-mysql-204644881
1cdfc692003a  testrail-web-204644793
6f26dfb2683e  testrail-fpm-204644793
029e16b26201  testrail-mysql-204644793
c10443222ac6  testrail-web-204567103
04339229397e  testrail-fpm-204567103
6ae0accab28d  testrail-mysql-204567103
b66b60d79e43  testrail-web-204553690
033b1f46afa9  testrail-fpm-204553690
a8879c5ef941  testrail-mysql-204553690
069954ba6010  testrail-web-204553539
ed6b17d911a5  testrail-fpm-204553539
1a1eed057ea0  testrail-mysql-204553539

Regjistri më i detajuar

$ docker login -u gitlab-ci-token -p ${CI_JOB_TOKEN} ${CI_REGISTRY}
KËRCENIM! PĂ«rdorimi i --password pĂ«rmes CLI-sĂ« Ă«shtĂ« i pasigurt. PĂ«rdorni --password-stdin.
KËRCENIM! FjalĂ«kalimi juaj do tĂ« ruhet pa enkriptim nĂ« /home/gitlab-runner/.docker/config.json.
Konfiguroni një ndihmës për kredenciale për të hequr këtë paralajmërim. Shihni
https://docs.docker.com/engine/reference/commandline/login/#credentials-store
Kyçja e Succesit
$ export TR_HTTP_PORT=$(shuf -i10000-60000 -n1)
$ export TR_HTTPS_PORT=$(shuf -i10000-60000 -n1)
$ mkdir ${CI_JOB_ID}
$ cp .indirect/docker-compose.yml ${CI_JOB_ID}/docker-compose.yml
$ make docker-up
docker-compose -f ${CI_JOB_ID:-.indirect}/docker-compose.yml kill
docker network rm testrail-network-${CI_JOB_ID:-local} || true
Gabim: Rrjeti i tillë nuk ekziston: testrail-network-204645172
docker network create testrail-network-${CI_JOB_ID:-local}
0a59552b4464b8ab484de6ae5054f3d5752902910bacb0a7b5eca698766d0331
docker-compose -f ${CI_JOB_ID:-.indirect}/docker-compose.yml pull
Po tërheq web       ... përfunduar
Po tërheq fpm       ... përfunduar
Po tërheq migrim ... përfunduar
Po tërheq db        ... përfunduar
docker-compose -f ${CI_JOB_ID:-.indirect}/docker-compose.yml up --force-recreate --renew-anon-volumes -d
Krijimi i volumit "204645172_static-content" me drejtuesin standard
Krijimi testrail-mysql-204645172 ... 
Krijimi testrail-mysql-204645172 ... përfundoi
Krijimi testrail-migration-204645172 ... përfundoi
Krijimi testrail-fpm-204645172       ... përfundoi
Krijimi testrail-web-204645172       ... përfundoi
docker ps
ID KONTEJNERI        IMAZHI                                                          KOMANDA                  KRIJUAR              STATUS              PORTAT                                           EMRAT
c6b76f9135ed        registry.gitlab.com/touchbit/image/testrail/web:latest         "nginx -g 'daemon of
"   13 sekonda më parë       Up 1 sekond         0.0.0.0:51148->80/tcp, 0.0.0.0:25426->443/tcp   testrail-web-204645172
01d303262d8e        registry.gitlab.com/touchbit/image/testrail/fpm:latest         "docker-php-entrypoi
"   16 sekonda më parë       Up 13 sekonda       9000/tcp                                        testrail-fpm-204645172
2cdab1edbf6a        registry.gitlab.com/touchbit/image/testrail/migration:latest   "docker-entrypoint.s
"   16 sekonda më parë       Up 13 sekonda       3306/tcp, 33060/tcp                             testrail-migration-204645172
826aaf7c0a29        mysql:5.7.22                                                   "docker-entrypoint.s
"   18 sekonda më parë       Up 16 sekonda       3306/tcp                                        testrail-mysql-204645172
6dbb3fae0322        registry.gitlab.com/touchbit/image/testrail/web:latest         "nginx -g 'daemon of
"   36 sekonda më parë       Up 22 sekonda       0.0.0.0:44202->80/tcp, 0.0.0.0:20151->443/tcp   testrail-web-204645084
3540f8d448ce        registry.gitlab.com/touchbit/image/testrail/fpm:latest         "docker-php-entrypoi
"   38 sekonda më parë       Up 35 sekonda       9000/tcp                                        testrail-fpm-204645084
70fea72aa10d        mysql:5.7.22                                                   "docker-entrypoint.s
"   40 sekonda më parë       Up 37 sekonda       3306/tcp                                        testrail-mysql-204645084
d8aa24b2892d        registry.gitlab.com/touchbit/image/testrail/web:latest         "nginx -g 'daemon of
"   Rreth një minut më parë   Up 53 sekonda       0.0.0.0:31103->80/tcp, 0.0.0.0:43872->443/tcp   testrail-web-204644881
6d4ccd910fad        registry.gitlab.com/touchbit/image/testrail/fpm:latest         "docker-php-entrypoi
"   Rreth një minut më parë   Up Rreth një minut   9000/tcp                                        testrail-fpm-204644881
685d8023a3ec        mysql:5.7.22                                                   "docker-entrypoint.s
"   Rreth një minut më parë   Up Rreth një minut   3306/tcp                                        testrail-mysql-204644881
1cdfc692003a        registry.gitlab.com/touchbit/image/testrail/web:latest         "nginx -g 'daemon of
"   Rreth një minut më parë   Up Rreth një minut   0.0.0.0:44752->80/tcp, 0.0.0.0:23540->443/tcp   testrail-web-204644793
6f26dfb2683e        registry.gitlab.com/touchbit/image/testrail/fpm:latest         "docker-php-entrypoi
"   Rreth një minut më parë   Up Rreth një minut   9000/tcp                                        testrail-fpm-204644793
029e16b26201        mysql:5.7.22                                                   "docker-entrypoint.s
"   Rreth një minut më parë   Up Rreth një minut   3306/tcp                                        testrail-mysql-204644793
c10443222ac6        registry.gitlab.com/touchbit/image/testrail/web:latest         "nginx -g 'daemon of
"   5 orë më parë          Up 5 orë          0.0.0.0:57123->80/tcp, 0.0.0.0:31657->443/tcp   testrail-web-204567103
04339229397e        registry.gitlab.com/touchbit/image/testrail/fpm:latest         "docker-php-entrypoi
"   5 orë më parë          Up 5 orë          9000/tcp                                        testrail-fpm-204567103
6ae0accab28d        mysql:5.7.22                                                   "docker-entrypoint.s
"   5 orë më parë          Up 5 orë          3306/tcp                                        testrail-mysql-204567103
b66b60d79e43        registry.gitlab.com/touchbit/image/testrail/web:latest         "nginx -g 'daemon of
"   5 orë më parë          Up 5 orë          0.0.0.0:56321->80/tcp, 0.0.0.0:58749->443/tcp   testrail-web-204553690
033b1f46afa9        registry.gitlab.com/touchbit/image/testrail/fpm:latest         "docker-php-entrypoi
"   5 orë më parë          Up 5 orë          9000/tcp                                        testrail-fpm-204553690
a8879c5ef941        mysql:5.7.22                                                   "docker-entrypoint.s
"   5 orë më parë          Up 5 orë          3306/tcp                                        testrail-mysql-204553690
069954ba6010        registry.gitlab.com/touchbit/image/testrail/web:latest         "nginx -g 'daemon of
"   5 orë më parë          Up 5 orë          0.0.0.0:32869->80/tcp, 0.0.0.0:16066->443/tcp   testrail-web-204553539
ed6b17d911a5        registry.gitlab.com/touchbit/image/testrail/fpm:latest         "docker-php-entrypoi
"   5 orë më parë          Up 5 orë          9000/tcp                                        testrail-fpm-204553539
1a1eed057ea0        mysql:5.7.22                                                   "docker-entrypoint.s
"   5 orë më parë          Up 5 orë          3306/tcp                                        testrail-mysql-204553539

Të gjitha detyrat përfunduan me sukses

Artefaktet e detyrave përmbajnë logët e shërbimeve dhe testeve
GitLab Shell Runner. Konkurruese e ekzekutimit të shërbimeve të testuara me ndihmën e Docker Compose

GitLab Shell Runner. Konkurruese e ekzekutimit të shërbimeve të testuara me ndihmën e Docker Compose

Duket se gjithçka është në rregull, por ka një nuancë. Pipeline mund të anulohet me forcë gjatë ekzekutimit të testeve integruese, dhe në këtë rast, kontejnerët e nisur nuk do të ndalen. Herë pas here, ne duhet të pastroni runner-in. Fatkeqësisht, detyra për përmirësim në GitLab CE ende është në status Hapur

Por ne kemi shtuar ekzekutimin e detyrës sipas orarit, dhe askush nuk na ndalon ta ekzekutojmë manualisht.
Kalo në projektin tonë -> CI/CD -> Oraret dhe ekzekuto detyrën Pastroni runner-in

GitLab Shell Runner. Konkurruese e ekzekutimit të shërbimeve të testuara me ndihmën e Docker Compose

Pra, në përfundim:

  • Ne kemi njĂ« shell runner.
  • Nuk ka konflikte mes detyrave dhe ambientit.
  • Ne kemi njĂ« ekzekutim paralel tĂ« detyrave me testet integruese.
  • Testet integruese mund tĂ« ekzekutohen si lokalisht ashtu edhe nĂ« kontejner.
  • LogĂ«t e shĂ«rbimeve dhe testeve mblidhen dhe lidhen me detyrĂ«n e pipeline.
  • Ka mundĂ«si pastrimi tĂ« runner-it nga imazhet e vjetra docker.

Koha e konfigurimit — ~2 orĂ«.
Kjo ishte gjithçka. Do të isha i lumtur për feedback-un.

Te përmbajtja

Burimi: habr.com

Blini hosting tĂ« besueshĂ«m pĂ«r faqe interneti me mbrojtje nga DDoS, serverĂ« VPS VDS đŸ”„ Blini hosting tĂ« besueshĂ«m pĂ«r faqe interneti me mbrojtje nga DDoS, serverĂ« VPS VDS | ProHoster