🥇Pagpapatakbo ng mga JMeter test sa OpenShift gamit ang Jenkins Pipeline

Kumusta sa lahat!

Sa artikulong ito gusto kong ibahagi ang isa sa mga paraan upang magpatakbo ng mga pagsubok sa pagganap ng JMeter sa OpenShift gamit ang Jenkins bilang automation. Una gagawin namin ang lahat ng kinakailangang hakbang (paglikha ImageStreams, BuildConfig, Job atbp.) sa manual mode. Pagkatapos nito, isulat natin ang Jenkins Pipeline.

Bilang panimulang punto dapat tayong magkaroon ng:

nagpapatakbo ng OpenShift (v3.11) cluster
Jenkins server na may mga naka-configure na kredensyal para gumana sa OpenShift
file apache-jmeter-5.2.tgz

Bilang mga pagsubok ito ay magiging simple HTTP Request sa ya.ru sa isang batis.

Paglikha ng isang proyekto sa OpenShift

Magsimula tayo sa paglikha ng isang bagong kapaligiran. Lumikha tayo perftest napapaligiran ng isang pangkat:

$ oc new-project perftest --display-name="Performance Tests" --description="Performance Tests - JMeter"

Awtomatiko tayong ililipat sa bagong likhang kapaligiran perftest, tingnan natin kung ganito:

$ oc project
Using project "perftest" on server "https://127.0.0.1:8443".

Paglikha ng Imbakan

Ang mga ulat sa pagsubok ay maiimbak sa karaniwan sa web server at jmeter-meter'isang lugar - /jmeter/reports.

Mas mainam na gumawa ng mga Storaj ngayon, dahil ang mga POD ay iuugnay sa kanila jmeter-web и jmeter-master.

Makakakita ka ng mas detalyadong impormasyon sa imbakan sa opisyal na dokumentasyon Patuloy na Pag-iimbak.

Gumawa tayo ng yaml file para sa PV и PVC.

pv.yaml

$ tee pv.yaml<<EOF
apiVersion: v1
kind: PersistentVolume
metadata:
  name: jmeter-reports
spec:
  capacity:
    storage: 10Gi
  accessModes:
    - ReadWriteMany
  glusterfs:
    endpoints: glusterfs-cluster
    path: /jmeter/reports
    readOnly: false
  persistentVolumeReclaimPolicy: Retain
EOF

pvc.yaml

$ tee pvc.yaml<<EOF
apiVersion: v1
kind: PersistentVolumeClaim
metadata:
  name: jmeter-reports
spec:
  accessModes:
    - ReadWriteMany
  resources:
    requests:
      storage: 10Gi
EOF

Lumikha tayo PV и PVC napapalibutan ng OpenShift:

$ oc create -f pv.yaml -n perftest
$ oc create -f pvc.yaml -n perftest

Sinusuri ang katayuan para sa PVC:

$ oc get pvc -n perftest
NAME             STATUS    VOLUME                                     CAPACITY   ACCESS MODES   STORAGECLASS        AGE
jmeter-reports   Bound     pvc-b0e5f152-db4b-11ea-a497-566f75280024   10Gi       RWX            glusterfs-storage   8m

Narito kung ano ang magiging hitsura nito sa GUI:

Paglikha ng JMeter Base Image

Lumipat tayo sa paglikha ImageStream и BuildConfig.

Mahahanap mo ang lahat ng kinakailangang impormasyon sa dokumentasyon - Mga Build at Image Stream.

Ang diskarte sa pagbuo ng imahe ay Docker mula sa isang lokal na mapagkukunan.

Gumawa tayo ng batayang imahe jmeter-base, na siyang magiging batayan para sa jmeter-master.

dockerfile

FROM openjdk:8u212-jdk

ARG JMETER_VER="5.2"
ENV JMETER_HOME /jmeter/apache-jmeter-$JMETER_VER
ENV PATH $JMETER_HOME/bin:$PATH

RUN mkdir -p /jmeter/results 
    && mkdir /jmeter/tests

WORKDIR /jmeter

COPY apache-jmeter-$JMETER_VER.tgz .

RUN tar -xzf $JMETER_HOME.tgz 
    && rm $JMETER_HOME.tgz 
    && ls -la

RUN sed -i s/#server.rmi.ssl.disable=false/server.rmi.ssl.disable=true/ $JMETER_HOME/bin/jmeter.properties

EXPOSE 60000

ay.yaml

$ tee is.yaml<<EOF
apiVersion: v1
kind: ImageStream
metadata:
  labels:
    build: jmeter-base
  name: jmeter-base
EOF

bc.yaml

$ tee bc.yaml<<EOF
apiVersion: v1
kind: BuildConfig
metadata:
  name: jmeter-base
spec:
  failedBuildsHistoryLimit: 5
  nodeSelector: null
  output:
    to:
      kind: ImageStreamTag
      name: 'jmeter-base:latest'
  postCommit: {}
  resources: {}
  runPolicy: Serial
  source:
    binary: {}
    type: Binary
  strategy:
    dockerStrategy:
      from:
        kind: ImageStreamTag
        name: 'openjdk:8u212-jdk'
    type: Docker
  successfulBuildsHistoryLimit: 5
EOF

Gumawa tayo ng mga bagay IS и BC:

$ oc create -f is.yaml -n perftest
$ oc create -f bc.yaml -n perftest

Ngayon, tipunin natin ang batayang imahe jmeter-base:

$ oc start-build jmeter-base -n perftest --from-dir=. --follow

JMeter WEB

jmeter-web Ito ay isang Apache web server. Ang gawain nito ay magbigay ng isang direktoryo na may mga resulta ng pagsubok para sa pagtingin.

Inihanda Dockerfile at configuration file httpd.conf. Para sa direktiba DocumentRoot itinakda ang halaga /jmeter/reports, ibig sabihin. ang direktoryo kung saan naka-save ang mga resulta ng pagsubok.

dockerfile

$ tee Dockerfile<<EOF
FROM httpd:2.4

COPY httpd.conf /usr/local/apache2/conf/httpd.conf
RUN chmod -R 777 /usr/local/apache2/logs

EXPOSE 8080

CMD ["httpd", "-D", "FOREGROUND"]
EOF

ay.yaml

$ tee is.yaml<<EOF
apiVersion: v1
kind: ImageStream
metadata:
  generation: 1
  labels:
    build: jmeter-web
  name: jmeter-web
EOF

bc.yaml

$ tee bc.yaml<<EOF
apiVersion: v1
kind: BuildConfig
metadata:
  name: jmeter-web
spec:
  failedBuildsHistoryLimit: 5
  nodeSelector: null
  output:
    to:
      kind: ImageStreamTag
      name: 'jmeter-web:latest'
  runPolicy: Serial
  source:
    binary: {}
    type: Binary
  strategy:
    dockerStrategy:
      from:
        kind: ImageStreamTag
        name: 'httpd:2.4'
    type: Docker
  successfulBuildsHistoryLimit: 5
EOF

Lumikha tayo ImageStream и BuildConfig mga bagay:

$ oc create -f is.yaml -n perftest
$ oc create -f bc.yaml -n perftest

Pagkolekta ng larawan mula sa Dockerfile:

$ oc start-build jmeter-web -n perftest --from-dir=. --follow

dc.yaml

$ tee dc.yaml<<EOF
apiVersion: apps.openshift.io/v1
kind: DeploymentConfig
metadata:
  name: jmeter-web
spec:
  replicas: 1
  template:
    metadata:
      labels:
        name: jmeter-web
    spec:
      containers:
        - image: 172.30.1.1:5000/perftest/jmeter-web
          name: jmeter-web
          volumeMounts:
            - mountPath: /jmeter/reports
              name: jmeter-reports
          ports:
            - containerPort: 80
              protocol: TCP
            - containerPort: 8080
              protocol: TCP
      volumes:
        - name: jmeter-reports
          persistentVolumeClaim:
            claimName: jmeter-reports
EOF

sc.yaml

$ tee sc.yaml<<EOF
apiVersion: v1
kind: Service
metadata:
  labels:
    app: jmeter-web
  name: jmeter-web
spec:
  ports:
    - name: 8080-tcp
      port: 8080
      protocol: TCP
      targetPort: 8080
  selector:
    deploymentconfig: jmeter-web
  sessionAffinity: None
  type: ClusterIP
EOF

Gumawa tayo ng mga bagay Service и DeploymentConfig:

$ oc create -f sc.yaml -n perftest
$ oc create -f dc.yaml -n perftest

Jmeter-master

Simulan natin ang pag-deploy ng Apache web server.

Ito ang Dockerfile jmeter-master'a, batay sa jmeter-base, na magpapatakbo ng mga pagsubok at i-save ang mga resulta sa storage.

dockerfile

Dockerfile para sa jmeter-master, batay sa jmeter-base.

FROM jmeter-base

ARG JMETER_VER="5.2"
ENV JMETER_HOME /jmeter/apache-jmeter-$JMETER_VER
ENV PATH $JMETER_HOME/bin:$PATH

WORKDIR /jmeter
COPY run.sh /jmeter/
COPY tests/*.jmx /jmeter/tests/
RUN chmod +x /jmeter/run.sh

ENTRYPOINT ["/bin/bash"]
CMD ["/jmeter/run.sh"]

tumakbo.sh

run.sh ito ay isang script na nagpapatakbo ng JMeter at nagse-save ng mga resulta sa isang direktoryo files.

Sa bawat oras na ilulunsad ang script, tinatanggal nito ang mga nakaraang pagsubok, kaya maaari ka lamang gumana sa pinakabagong data. Ngunit ito ay hindi isang problema, dahil maaari mong baguhin ito upang umangkop sa iyong mga pangangailangan.

#!/bin/bash

set -e

if [ -d "/jmeter/reports/files" ]
then
    echo "Directory /jmeter/reports/files exist - OK"
else
    echo "Creating /jmeter/reports/files directory"
    mkdir /jmeter/reports/files
fi

if [ -d "/jmeter/reports/dashboards" ]
then
    echo "Directory /jmeter/reports/dashboards exist"
else
    echo "Creating /jmeter/reports/dashboards directory"
    mkdir /jmeter/reports/dashboards
fi

echo "*** JMeter START Tests ***"

for item in $(ls -1 /jmeter/tests | grep jmx)
do
    echo "*** Removing dashboard directory for $item"
    rm -rdf /jmeter/reports/dashboards/${item}*

    echo "*** Removing tests directory for $item"
    rm -rdf /jmeter/reports/files/${item}*

    echo "*** Testing a $item file ***"
    jmeter -n -t /jmeter/tests/${item} -l /jmeter/reports/files/${item}-report.jtl -e -o /jmeter/reports/dashboards/${item}-dash
done

ay.yaml

$ tee is.yaml<<EOF
apiVersion: image.openshift.io/v1
kind: ImageStream
metadata:
  generation: 1
  labels:
    build: jmeter-master
  name: jmeter-master
EOF

bc.yaml

$ tee bc.yaml<<EOF
apiVersion: build.openshift.io/v1
kind: BuildConfig
metadata:
  name: jmeter-master
spec:
  failedBuildsHistoryLimit: 5
  nodeSelector: null
  output:
    to:
      kind: ImageStreamTag
      name: 'jmeter-master:latest'
  runPolicy: Serial
  source:
    binary: {}
    type: Binary
  strategy:
    dockerStrategy:
      from:
        kind: ImageStreamTag
        name: 'jmeter-base:latest'
    type: Docker
  successfulBuildsHistoryLimit: 5
EOF

Lumikha tayo IS и BC mga bagay:

$ oc create -f is.yaml -n perftest
$ oc create -f bc.yaml -n perftest

Kinokolekta namin jmeter-master larawan:

$ oc start-build jmeter-master -n perftest --from-dir=. --follow

Trabaho

Job's ay ginagamit sa OpenShift'e upang magpatakbo ng isa o higit pa POD's at ginagarantiyahan ang kanilang matagumpay na pagkumpleto pagkatapos isagawa ang command/script.

$ tee job.yaml<<EOF
apiVersion: batch/v1
kind: Job
metadata:
  name: jmeter-master
  labels:
    jobName: jmeter-master
spec:
  completions: 1
  parallelism: 1
  template:
    metadata:
      name: jmeter-master
      labels:
        jobName: jmeter-master
    spec:
      containers:
        - name: jmeter-master
          image: 172.30.1.1:5000/perftest/jmeter-master:latest
          volumeMounts:
            - mountPath: /jmeter/reports
              name: jmeter-reports
          imagePullPolicy: Always
      volumes:
        - name: jmeter-reports
          persistentVolumeClaim:
            claimName: jmeter-reports
      restartPolicy: Never
      terminationGracePeriodSeconds: 30
EOF

Lumikha ng isang bagay Job:

$ oc create -f job.yaml -n perftest

Suriin natin ang katayuan ng trabaho:

$ oc get jobs -n perftest
NAME            DESIRED   SUCCESSFUL   AGE
jmeter-master   1         1            5m

Burahin Job gamitin natin ang utos:

$ oc delete jobs/jmeter-master -n perftest --ignore-not-found=true

Jenkins Pipeline

Ngayon automation. Balikan natin muli ang mga hakbang:

git clone
oc whoami -t
oc start-build ...
oc delete jobs/jmeter-master
oc create -f job.yaml -n perftest

Nasa ibaba ang isang pipeline kung saan isinasagawa ang pag-clone ng repository, pagtanggal at paglikha ng OpenShift Job's.

#!groovy

pipeline {

    agent any

    stages {

        stage('Start Notifications') {
            steps {
                echo "Sending Email Notification"
            }
            post {
                always {
                    echo "STARTED - Performance Tests"
                    mail(to: '[email protected]', from: "[email protected]", subject: "START - Performance Tests",mimeType: "text/html", body: "<strong>START - Performance Tests</strong><br /><br />Project: Name of Project<br />Environment: PerfTest<br />Build number: ${env.BUILD_NUMBER}<br />Build URL:   ${env.BUILD_URL}"
                }
            }
        }

        stage('Git checkout') {
            steps {
                ...
            }
        }

        stage('Perf Tests') {
            steps {
                script {
                    sh '''
                        OC_CMD1="oc login -u=username -p=PASS -n=perftest 
                        --server=https://...:8443"

                        $OC_CMD1

                        OC_TOKEN=`oc whoami -t`

                        OC_CMD2="oc --token=$OC_TOKEN --server=https://...:8443 
                        start-build jmeter-master -n=perftest --from-dir=./master 
                        --follow=true"

                        OC_CMD3="oc --token=$OC_TOKEN --server=https://...:8443 
                        delete jobs/jmeter-master -n=perftest --ignore-not-found=true"

                        OC_CMD4="oc--token=$OC_TOKEN --server=https://...:8443 
                        create -f ./master/job.yaml -n=perftest"

                        $OC_CMD2
                        $OC_CMD3
                        $OC_CMD4
                    '''
                }
            }
        }

        post {
            failure {
                echo "FAILED - Performance Tests"
                mail(to: '[email protected]', from: "[email protected]", subject: "FAILED - Performance Tests",mimeType: "text/html", body: "<strong>FAILED - Performance Tests</strong><br /><br />Project: Name of Project<br />Environment: PerfTest<br />Build number: ${env.BUILD_NUMBER}<br />Build URL: ${env.BUILD_URL}"
                }

            success {
                echo "SUCCESSED - Performance Tests"
                mail(to: '[email protected]', from: "[email protected]", subject: "SUCCESSED - Performance Tests",mimeType: "text/html", body: "<strong>SUCCESSED - Performance Tests</strong><br /><br />Project: Name of Project<br />Environment: PerfTest<br />Build number: ${env.BUILD_NUMBER}<br />Build URL:   ${env.BUILD_URL}"
            }
        }

    }
}

Pagkatapos makumpleto ng Pipeline ang operasyon nito, makakatanggap kami ng notification sa pamamagitan ng email '[email protected] mula sa [email protected].

Sa pamamagitan ng pag-click sa link http://jmeter-web.127.0.0.1.nip.io/ makikita natin ang direktoryo files, na nag-iimbak ng mga ulat ng pagsubok:

Mga nilalaman ng file ya.HTTP.Request.jmx-report.jtk:

timeStamp,elapsed,label,responseCode,responseMessage,threadName,dataType,success,failureMessage,bytes,sentBytes,grpThreads,allThreads,URL,Latency,IdleTime,Connect
1597311456443,569,Yandex - HTTP Request,200,Ok,Thread Group 1-1,text,true,,59449,220,1,1,https://ya.ru/,145,0,57
1597311456443,147,Yandex - HTTP Request-0,302,Found,Thread Group 1-1,,true,,478,110,1,1,http://ya.ru/,145,0,57
1597311456592,420,Yandex - HTTP Request-1,200,Ok,Thread Group 1-1,text,true,,58971,110,1,1,https://ya.ru/,370,0,259

Konklusyon

Ipinakita ng artikulong ito ang isa sa mga opsyon para sa pagpapatakbo ng mga pagsubok sa JMeter sa kapaligiran ng OpenShift. Kinumpleto namin nang manu-mano ang lahat ng mga hakbang, pagkatapos ay ginawa namin ang Jenkins Pipeline upang i-automate ang proseso ng pagpapatakbo ng mga pagsubok.

Mga mapagkukunan at dokumentasyon

Pinagmulan: www.habr.com

Pagpapatakbo ng mga pagsubok sa JMeter sa OpenShift gamit ang Jenkins Pipeline

Paglikha ng isang proyekto sa OpenShift

Paglikha ng Imbakan

Paglikha ng JMeter Base Image

JMeter WEB

Jmeter-master

Jenkins Pipeline

Konklusyon

Mga mapagkukunan at dokumentasyon

Magdagdag ng komento Kanselahin ang sumagot