ProHoster > Blog > Administrim > Ekzekutimi i testeve JMeter në OpenShift duke përdorur Jenkins Pipeline

Ekzekutimi i testeve JMeter në OpenShift duke përdorur Jenkins Pipeline

Përshëndetje të gjithëve!

Në këtë artikull do të ndaj një nga mënyrat e ekzekutimit të testeve të performancës JMeter në OpenShift me përdorimin e Jenkins si automatizim. Fillimisht, ne do të kryejmë të gjitha veprimet e nevojshme (krijim ImageStreams, BuildConfig, Job dhe të tjera) manualisht. Më pas do të shkruajmë Jenkins Pipeline.

Si pikë nisjeje, ne duhet të kemi:

  1. një klaster OpenShift funksional (v3.11)
  2. Një server Jenkins me kredenciale të konfiguruara për të punuar në OpenShift
  3. skeda apache-jmeter-5.2.tgz

Testet do të jenë një HTTP Request në ya.ru në një shkallë.

Krijimi i projektit në OpenShift

Të fillojmë me krijimin e një ambienti të ri. Do të krijojmë perftest ambientin me komandën:

$ oc new-project perftest --display-name="Testet e Performancës" --description="Testet e Performancës - JMeter"

Ne do të ridrejtohemi automatikisht në ambjentin e sapo krijuar perftest, të kontrollojmë që është kështu:

$ oc project
Përdorimi i projektit "perftest" në serverin "https://127.0.0.1:8443".

Krijimi i Storage-it

Raportet e testeve do tĂ« ruhen nĂ« njĂ« vend tĂ« pĂ«rbashkĂ«t pĂ«r serverin web dhe jmeter-meternĂ« vendin e saj — /jmeter/reports.

ËshtĂ« mĂ« mirĂ« tĂ« krijoni storage tani, sepse do tĂ« lidhen me POD-et jmeter-web dhe jmeter-master.

Informacione më të detajuara mbi storage do të gjeni në dokumentacionin zyrtar Storage të Përhershëm.

Do të krijojmë skedarë yaml për PV dhe PVC.

pv.yaml

$ tee pv.yaml<<EOF
apiVersion: v1
kind: PersistentVolume
metadata:
  name: jmeter-reports
spec:
  capacity:
    storage: 10Gi
  accessModes:
    - ReadWriteMany
  glusterfs:
    endpoints: glusterfs-cluster
    path: /jmeter/reports
    readOnly: false
  persistentVolumeReclaimPolicy: Retain
EOF

pvc.yaml

$ tee pvc.yaml<<EOF
apiVersion: v1
kind: PersistentVolumeClaim
metadata:
  name: jmeter-reports
spec:
  accessModes:
    - ReadWriteMany
  resources:
    requests:
      storage: 10Gi
EOF

Do të krijojmë PV dhe PVC në ambientin e OpenShift:

$ oc create -f pv.yaml -n perftest
$ oc create -f pvc.yaml -n perftest

Kontrolloni statusin për PVC:

$ oc get pvc -n perftest
EMRI             STATUSI    VOLUMI                                     KAPACITETI   MODET E QASJES   STORAGECLASS        MOSHA
jmeter-reports   E lidhur    pvc-b0e5f152-db4b-11ea-a497-566f75280024   10Gi       RWX            glusterfs-storage   8m

Ja si do të duket në GUI:

Ekzekutimi i testeve JMeter në OpenShift duke përdorur Jenkins Pipeline

Krijimi i imazhit bazë të JMeter

Të kalojmë në krijimin e ImageStream dhe BuildConfig.

TĂ« gjithĂ« informacionin e nevojshĂ«m mund ta gjeni nĂ« dokumentacion — Builds and Image Streams.

Si strategji për ndërtimin e imazheve përdoret Docker nga burimi lokal.

Do të krijojmë imazhin bazë jmeter-base, i cili do të jetë baza për jmeter-master.

Dockerfile

FROM openjdk:8u212-jdk

ARG JMETER_VER="5.2"
ENV JMETER_HOME /jmeter/apache-jmeter-$JMETER_VER
ENV PATH $JMETER_HOME/bin:$PATH

RUN mkdir -p /jmeter/results 
    && mkdir /jmeter/tests

WORKDIR /jmeter

COPY apache-jmeter-$JMETER_VER.tgz .

RUN tar -xzf $JMETER_HOME.tgz 
    && rm $JMETER_HOME.tgz 
    && ls -la

RUN sed -i s/#server.rmi.ssl.disable=false/server.rmi.ssl.disable=true/ $JMETER_HOME/bin/jmeter.properties

EXPOSE 60000

is.yaml

$ tee is.yaml<<EOF
apiVersion: v1
kind: ImageStream
metadata:
  labels:
    build: jmeter-base
  name: jmeter-base
EOF

bc.yaml

$ tee bc.yaml<<EOF
apiVersion: v1
kind: BuildConfig
metadata:
  name: jmeter-base
spec:
  failedBuildsHistoryLimit: 5
  nodeSelector: null
  output:
    to:
      kind: ImageStreamTag
      name: 'jmeter-base:latest'
  postCommit: {}
  resources: {}
  runPolicy: Serial
  source:
    binary: {}
    type: Binary
  strategy:
    dockerStrategy:
      from:
        kind: ImageStreamTag
        name: 'openjdk:8u212-jdk'
    type: Docker
  successfulBuildsHistoryLimit: 5
EOF

Të krijojmë objekte IS dhe BC:

$ oc create -f is.yaml -n perftest
$ oc create -f bc.yaml -n perftest

Tani do të krijojmë imazhin bazë jmeter-base:

$ oc start-build jmeter-base -n perftest --from-dir=. --follow

JMeter WEB

jmeter-web ky është serveri web Apache. Detyra e tij është të ofrojë një direktori me rezultatet e testimit për t'u parë.

Përgatitur Dockerfile dhe skedari i konfigurimit httpd.conf. Për direktivën DocumentRoot është caktuar vlera /jmeter/reports, domethënë, direktoria ku ruhen rezultatet e testimit.

Dockerfile

$ tee Dockerfile<<EOF
FROM httpd:2.4

COPY httpd.conf /usr/local/apache2/conf/httpd.conf
RUN chmod -R 777 /usr/local/apache2/logs

EXPOSE 8080

CMD ["httpd", "-D", "FOREGROUND"]
EOF

is.yaml

$ tee is.yaml<<EOF
apiVersion: v1
kind: ImageStream
metadata:
  generation: 1
  labels:
    build: jmeter-web
  name: jmeter-web
EOF

bc.yaml

$ tee bc.yaml<<EOF
apiVersion: v1
kind: BuildConfig
metadata:
  name: jmeter-web
spec:
  failedBuildsHistoryLimit: 5
  nodeSelector: null
  output:
    to:
      kind: ImageStreamTag
      name: 'jmeter-web:latest'
  runPolicy: Serial
  source:
    binary: {}
    type: Binary
  strategy:
    dockerStrategy:
      from:
        kind: ImageStreamTag
        name: 'httpd:2.4'
    type: Docker
  successfulBuildsHistoryLimit: 5
EOF

Do të krijojmë ImageStream dhe BuildConfig objekte:

$ oc create -f is.yaml -n perftest
$ oc create -f bc.yaml -n perftest

Po krijojmë imazhin nga Dockerfile:

$ oc start-build jmeter-web -n perftest --from-dir=. --follow

dc.yaml

$ tee dc.yaml<<EOF
apiVersion: apps.openshift.io/v1
kind: DeploymentConfig
metadata:
  name: jmeter-web
spec:
  replicas: 1
  template:
    metadata:
      labels:
        name: jmeter-web
    spec:
      containers:
        - image: 172.30.1.1:5000/perftest/jmeter-web
          name: jmeter-web
          volumeMounts:
            - mountPath: /jmeter/reports
              name: jmeter-reports
          ports:
            - containerPort: 80
              protocol: TCP
            - containerPort: 8080
              protocol: TCP
      volumes:
        - name: jmeter-reports
          persistentVolumeClaim:
            claimName: jmeter-reports
EOF

sc.yaml

$ tee sc.yaml<<EOF
apiVersion: v1
kind: Service
metadata:
  labels:
    app: jmeter-web
  name: jmeter-web
spec:
  ports:
    - name: 8080-tcp
      port: 8080
      protocol: TCP
      targetPort: 8080
  selector:
    deploymentconfig: jmeter-web
  sessionAffinity: None
  type: ClusterIP
EOF

Të krijojmë objekte Shërbimi dhe DeploymentConfig:

$ oc create -f sc.yaml -n perftest
$ oc create -f dc.yaml -n perftest

Jmeter-master

Le të merremi me dislokimin e serverit web Apache.

Ky Ă«shtĂ« Dockerfile jmeter-master‘a, i bazuar nĂ« jmeter-base, i cili do tĂ« kryejĂ« testet dhe tĂ« ruajĂ« rezultatet nĂ« depo.

Dockerfile

Dockerfile për jmeter-master, i bazuar në jmeter-base.

FROM jmeter-base

ARG JMETER_VER="5.2"
ENV JMETER_HOME /jmeter/apache-jmeter-$JMETER_VER
ENV PATH $JMETER_HOME/bin:$PATH

WORKDIR /jmeter
COPY run.sh /jmeter/
COPY tests/*.jmx /jmeter/tests/
RUN chmod +x /jmeter/run.sh

ENTRYPOINT ["/bin/bash"]
CMD ["/jmeter/run.sh"]

run.sh

run.sh është një skenar që ekzekuton JMeter dhe ruan rezultatet në direktorinë files.

Me çdo nisje, skripti eliminon testet e mëparshme, kështu që mund të punohet vetëm me të dhënat më të fundit. Por kjo nuk është një problem, sepse mund të modifikohet sipas nevojave të tua.

#!/bin/bash

set -e

if [ -d "/jmeter/reports/files" ]
then
    echo "Directory /jmeter/reports/files exist - OK"
else
    echo "Creating /jmeter/reports/files directory"
    mkdir /jmeter/reports/files
fi

if [ -d "/jmeter/reports/dashboards" ]
then
    echo "Directory /jmeter/reports/dashboards exist"
else
    echo "Creating /jmeter/reports/dashboards directory"
    mkdir /jmeter/reports/dashboards
fi

echo "*** JMeter START Tests ***"

for item in $(ls -1 /jmeter/tests | grep jmx)
do
    echo "*** Removing dashboard directory for $item"
    rm -rdf /jmeter/reports/dashboards/${item}*

    echo "*** Removing tests directory for $item"
    rm -rdf /jmeter/reports/files/${item}*

    echo "*** Testing a $item file ***"
    jmeter -n -t /jmeter/tests/${item} -l /jmeter/reports/files/${item}-report.jtl -e -o /jmeter/reports/dashboards/${item}-dash
done

is.yaml

$ tee is.yaml<<EOF
apiVersion: image.openshift.io/v1
kind: ImageStream
metadata:
  generation: 1
  labels:
    build: jmeter-master
  name: jmeter-master
EOF

bc.yaml

$ tee bc.yaml<<EOF
apiVersion: build.openshift.io/v1
kind: BuildConfig
metadata:
  name: jmeter-master
spec:
  failedBuildsHistoryLimit: 5
  nodeSelector: null
  output:
    to:
      kind: ImageStreamTag
      name: 'jmeter-master:latest'
  runPolicy: Serial
  source:
    binary: {}
    type: Binary
  strategy:
    dockerStrategy:
      from:
        kind: ImageStreamTag
        name: 'jmeter-base:latest'
    type: Docker
  successfulBuildsHistoryLimit: 5
EOF

Do të krijojmë IS dhe BC objekte:

$ oc create -f is.yaml -n perftest
$ oc create -f bc.yaml -n perftest

Kemi mbledhur jmeter-master imazhin:

$ oc start-build jmeter-master -n perftest --from-dir=. --follow

Job

JobPOD përdoren në OpenShiftpër të ekzekutuar një ose më shumë PODdhe për të garantuar përfundimin e tyre të suksesshëm pas ekzekutimit të komandës/skenarit.

$ tee job.yaml<<EOF
apiVersion: batch/v1
kind: Job
metadata:
  name: jmeter-master
  labels:
    jobName: jmeter-master
spec:
  completions: 1
  parallelism: 1
  template:
    metadata:
      name: jmeter-master
      labels:
        jobName: jmeter-master
    spec:
      containers:
        - name: jmeter-master
          image: 172.30.1.1:5000/perftest/jmeter-master:latest
          volumeMounts:
            - mountPath: /jmeter/reports
              name: jmeter-reports
          imagePullPolicy: Always
      volumes:
        - name: jmeter-reports
          persistentVolumeClaim:
            claimName: jmeter-reports
      restartPolicy: Never
      terminationGracePeriodSeconds: 30
EOF

Krijojmë objektin Job:

$ oc create -f job.yaml -n perftest

Le të kontrollojmë statusin e punës:

$ oc get jobs -n perftest
NAME            DESIRED   SUCCESSFUL   AGE
jmeter-master   1         1            5m

Për ta fshirë Job do të përdorim komandën:

$ oc delete jobs/jmeter-master -n perftest --ignore-not-found=true

Jenkins Pipeline

Tani automatizimi. Le të përsërisim hapat:

  1. git clone
  2. oc whoami -t
  3. oc start-build ...
  4. oc delete jobs/jmeter-master
  5. oc create -f job.yaml -n perftest

Më poshtë është pipeline-i, në të cilin kryhen klonimi i repozitorit, fshirja dhe krijimi i OpenShift Jobpër të.

#!groovy

pipeline {

    agent any

    stages {

        stage('Start Notifications') {
            steps {
                echo "Sending Email Notification"
            }
            post {
                always {
                    echo "STARTED - Performance Tests"
                    mail(to: 'username@srv.net', from: "jenkins@srv.net", subject: "START - Performance Tests",mimeType: "text/html", body: "<strong>FILLIM - Testet e Performancës</strong><br /><br />Projekti: Emri i Projektit<br />Mjedisi: TestPerf<br />Numri i ndërtimit: ${env.BUILD_NUMBER}<br />URL e ndërtimit:   ${env.BUILD_URL}"
                }
            }
        }

        shkalla('Kontrolli i Git') {
            hapat {
                ...
            }
        }

        shkalla('Testet e Performancës') {
            hapat {
                skenar {
                    sh '''
                        OC_CMD1="oc login -u=emri_i_përdoruesit -p=KALIM -n=testperf 
                        --server=https://...:8443"

                        $OC_CMD1

                        OC_TOKEN=`oc whoami -t`

                        OC_CMD2="oc --token=$OC_TOKEN --server=https://...:8443 
                        start-build jmeter-master -n=testperf --from-dir=./master 
                        --follow=true"

                        OC_CMD3="oc --token=$OC_TOKEN --server=https://...:8443 
                        delete jobs/jmeter-master -n=testperf --ignore-not-found=true"

                        OC_CMD4="oc--token=$OC_TOKEN --server=https://...:8443 
                        create -f ./master/job.yaml -n=testperf"

                        $OC_CMD2
                        $OC_CMD3
                        $OC_CMD4
                    '''
                }
            }
        }

        post {
            dështimi {
                echo "DËSHTUAR - Testet e Performancës"
                mail(to: 'username@srv.net', from: "jenkins@srv.net", subject: "DËSHTUAR - Testet e Performancës",mimeType: "text/html", body: "<strong>DËSHTUAR - Testet e Performancës</strong><br /><br />Projekti: Emri i Projektit<br />Mjedisi: TestPerf<br />Numri i ndërtimit: ${env.BUILD_NUMBER}<br />URL e ndërtimit: ${env.BUILD_URL}"
                }

            suksesi {
                echo "SUKSES - Testet e Performancës"
                mail(to: 'username@srv.net', from: "jenkins@srv.net", subject: "SUKSES - Testet e Performancës",mimeType: "text/html", body: "<strong>SUKSES - Testet e Performancës</strong><br /><br />Projekti: Emri i Projektit<br />Mjedisi: TestPerf<br />Numri i ndërtimit: ${env.BUILD_NUMBER}<br />URL e ndërtimit:   ${env.BUILD_URL}"
            }
        }

    }
}

Pas përfundimit të Pipeline-it, do të marrim një njoftim në email 'username@srv.net nga jenkins@srv.net.

Duke kaluar në linkun http://jmeter-web.127.0.0.1.nip.io/ do të shohim direktorinë files, në të cilën ruhen raportet e testeve:

Ekzekutimi i testeve JMeter në OpenShift duke përdorur Jenkins Pipeline

PĂ«rmbajtja e skedarit ya.HTTP.Request.jmx-report.jtk:

timeStamp,elapsed,label,responseCode,responseMessage,threadName,dataType,success,failureMessage,bytes,sentBytes,grpThreads,allThreads,URL,Latency,IdleTime,Connect
1597311456443,569,Yandex - HTTP Request,200,Ok,Thread Group 1-1,text,true,,59449,220,1,1,https://ya.ru/,145,0,57
1597311456443,147,Yandex - HTTP Request-0,302,Found,Thread Group 1-1,,true,,478,110,1,1,http://ya.ru/,145,0,57
1597311456592,420,Yandex - HTTP Request-1,200,Ok,Thread Group 1-1,text,true,,58971,110,1,1,https://ya.ru/,370,0,259

PĂ«rfundim

Në këtë artikull u demonstrua një nga mënyrat e nisjes së testeve JMeter në ambientin OpenShift. Zhvilluam të gjitha hapat në mënyrë manuale, pas së cilës krijuam një Pipeline të Jenkins për të automatizuar procesin e nisjes së testeve.

Burimet dhe dokumentacioni

Burimi: habr.com

Bleni hostin e besueshĂ«m pĂ«r faqet me mbrojtje nga DDoS, VPS VDS servera đŸ”„ Bli hostin e besueshĂ«m pĂ«r faqet me mbrojtje nga DDoS, VPS VDS servera | ProHoster