🥇 JMeter ტესტების გაშვება OpenShift-ში Jenkins Pipeline

გაუმარჯოს ყველას!

ამ სტატიაში მინდა გაგიზიაროთ JMeter შესრულების ტესტების გაშვების ერთ-ერთი გზა OpenShift-ში ჯენკინსის ავტომატიზაციის გამოყენებით. პირველ რიგში ჩვენ გავაკეთებთ ყველა საჭირო ნაბიჯს (შექმნა ImageStreams, BuildConfig, Job და ა.შ.) ხელით რეჟიმში. ამის შემდეგ დავწეროთ Jenkins Pipeline.

როგორც ამოსავალი წერტილი უნდა გვქონდეს:

გაშვებული OpenShift (v3.11) კლასტერი
ჯენკინსის სერვერი კონფიგურირებული რწმუნებით OpenShift-ში მუშაობისთვის
ფაილი apache-jmeter-5.2.tgz

როგორც ტესტები, ეს მარტივი იქნება HTTP Request on ya.ru ერთ ნაკადში.

პროექტის შექმნა OpenShift-ში

დავიწყოთ ახალი გარემოს შექმნით. შევქმნათ perftest გარშემორტყმული გუნდით:

$ oc new-project perftest --display-name="Performance Tests" --description="Performance Tests - JMeter"

ჩვენ ავტომატურად გადავიყვანთ ახლად შექმნილ გარემოში perftest, მოდით შევამოწმოთ, რომ ასეა:

$ oc project
Using project "perftest" on server "https://127.0.0.1:8443".

შენახვის შექმნა

ტესტის ანგარიშები შეინახება საერთო ვებ სერვერთან და jmeter-meter'ადგილი - /jmeter/reports.

სჯობს ახლავე შექმნათ Storajs, რადგან მათზე POD იქნება მიბმული jmeter-web и jmeter-master.

შენახვის შესახებ უფრო დეტალურ ინფორმაციას ნახავთ ოფიციალურ დოკუმენტაციაში მუდმივი შენახვა.

მოდით შევქმნათ yaml ფაილები PV и PVC.

pv.yaml

$ tee pv.yaml<<EOF
apiVersion: v1
kind: PersistentVolume
metadata:
  name: jmeter-reports
spec:
  capacity:
    storage: 10Gi
  accessModes:
    - ReadWriteMany
  glusterfs:
    endpoints: glusterfs-cluster
    path: /jmeter/reports
    readOnly: false
  persistentVolumeReclaimPolicy: Retain
EOF

pvc.yaml

$ tee pvc.yaml<<EOF
apiVersion: v1
kind: PersistentVolumeClaim
metadata:
  name: jmeter-reports
spec:
  accessModes:
    - ReadWriteMany
  resources:
    requests:
      storage: 10Gi
EOF

შევქმნათ PV и PVC გარშემორტყმული OpenShift-ით:

$ oc create -f pv.yaml -n perftest
$ oc create -f pvc.yaml -n perftest

სტატუსის შემოწმება PVC:

$ oc get pvc -n perftest
NAME             STATUS    VOLUME                                     CAPACITY   ACCESS MODES   STORAGECLASS        AGE
jmeter-reports   Bound     pvc-b0e5f152-db4b-11ea-a497-566f75280024   10Gi       RWX            glusterfs-storage   8m

აი, როგორ გამოიყურება ის GUI-ში:

JMeter საბაზისო სურათის შექმნა

მოდით გადავიდეთ შექმნაზე ImageStream и BuildConfig.

თქვენ შეგიძლიათ იპოვოთ ყველა საჭირო ინფორმაცია დოკუმენტაციაში - შენობები და გამოსახულების ნაკადები.

გამოსახულების აგების სტრატეგია არის Docker ადგილობრივი წყაროდან.

მოდით შევქმნათ საბაზისო სურათი jmeter-base, რომელიც იქნება საფუძველი jmeter-master.

dockerfile

FROM openjdk:8u212-jdk

ARG JMETER_VER="5.2"
ENV JMETER_HOME /jmeter/apache-jmeter-$JMETER_VER
ENV PATH $JMETER_HOME/bin:$PATH

RUN mkdir -p /jmeter/results 
    && mkdir /jmeter/tests

WORKDIR /jmeter

COPY apache-jmeter-$JMETER_VER.tgz .

RUN tar -xzf $JMETER_HOME.tgz 
    && rm $JMETER_HOME.tgz 
    && ls -la

RUN sed -i s/#server.rmi.ssl.disable=false/server.rmi.ssl.disable=true/ $JMETER_HOME/bin/jmeter.properties

EXPOSE 60000

არის.იამლი

$ tee is.yaml<<EOF
apiVersion: v1
kind: ImageStream
metadata:
  labels:
    build: jmeter-base
  name: jmeter-base
EOF

ძვ.იამლი

$ tee bc.yaml<<EOF
apiVersion: v1
kind: BuildConfig
metadata:
  name: jmeter-base
spec:
  failedBuildsHistoryLimit: 5
  nodeSelector: null
  output:
    to:
      kind: ImageStreamTag
      name: 'jmeter-base:latest'
  postCommit: {}
  resources: {}
  runPolicy: Serial
  source:
    binary: {}
    type: Binary
  strategy:
    dockerStrategy:
      from:
        kind: ImageStreamTag
        name: 'openjdk:8u212-jdk'
    type: Docker
  successfulBuildsHistoryLimit: 5
EOF

მოდით შევქმნათ ობიექტები IS и BC:

$ oc create -f is.yaml -n perftest
$ oc create -f bc.yaml -n perftest

ახლა მოდით შევკრიბოთ ბაზის გამოსახულება jmeter-base:

$ oc start-build jmeter-base -n perftest --from-dir=. --follow

JMeter WEB

jmeter-web ეს არის Apache ვებ სერვერი. მისი ამოცანაა მიაწოდოს დირექტორია ტესტის შედეგების სანახავად.

მომზადებული Dockerfile და კონფიგურაციის ფაილი httpd.conf. დირექტივისთვის DocumentRoot ღირებულების ნაკრები /jmeter/reports, ე.ი. დირექტორია, რომელშიც შენახულია ტესტის შედეგები.

dockerfile

$ tee Dockerfile<<EOF
FROM httpd:2.4

COPY httpd.conf /usr/local/apache2/conf/httpd.conf
RUN chmod -R 777 /usr/local/apache2/logs

EXPOSE 8080

CMD ["httpd", "-D", "FOREGROUND"]
EOF

არის.იამლი

$ tee is.yaml<<EOF
apiVersion: v1
kind: ImageStream
metadata:
  generation: 1
  labels:
    build: jmeter-web
  name: jmeter-web
EOF

ძვ.იამლი

$ tee bc.yaml<<EOF
apiVersion: v1
kind: BuildConfig
metadata:
  name: jmeter-web
spec:
  failedBuildsHistoryLimit: 5
  nodeSelector: null
  output:
    to:
      kind: ImageStreamTag
      name: 'jmeter-web:latest'
  runPolicy: Serial
  source:
    binary: {}
    type: Binary
  strategy:
    dockerStrategy:
      from:
        kind: ImageStreamTag
        name: 'httpd:2.4'
    type: Docker
  successfulBuildsHistoryLimit: 5
EOF

შევქმნათ ImageStream и BuildConfig ობიექტები:

$ oc create -f is.yaml -n perftest
$ oc create -f bc.yaml -n perftest

სურათის შეგროვება Dockerfile:

$ oc start-build jmeter-web -n perftest --from-dir=. --follow

dc.yaml

$ tee dc.yaml<<EOF
apiVersion: apps.openshift.io/v1
kind: DeploymentConfig
metadata:
  name: jmeter-web
spec:
  replicas: 1
  template:
    metadata:
      labels:
        name: jmeter-web
    spec:
      containers:
        - image: 172.30.1.1:5000/perftest/jmeter-web
          name: jmeter-web
          volumeMounts:
            - mountPath: /jmeter/reports
              name: jmeter-reports
          ports:
            - containerPort: 80
              protocol: TCP
            - containerPort: 8080
              protocol: TCP
      volumes:
        - name: jmeter-reports
          persistentVolumeClaim:
            claimName: jmeter-reports
EOF

sc.yaml

$ tee sc.yaml<<EOF
apiVersion: v1
kind: Service
metadata:
  labels:
    app: jmeter-web
  name: jmeter-web
spec:
  ports:
    - name: 8080-tcp
      port: 8080
      protocol: TCP
      targetPort: 8080
  selector:
    deploymentconfig: jmeter-web
  sessionAffinity: None
  type: ClusterIP
EOF

მოდით შევქმნათ ობიექტები Service и DeploymentConfig:

$ oc create -f sc.yaml -n perftest
$ oc create -f dc.yaml -n perftest

ჯმეტრ-ოსტატი

დავიწყოთ Apache ვებ სერვერის განლაგება.

ეს არის Dockerfile jmeter-masterა, ეფუძნება jmeter-base, რომელიც ჩაატარებს ტესტებს და შეინახავს შედეგებს შესანახად.

dockerfile

Dockerfile ამისთვის jmeter-master, დაფუძნებული jmeter-base.

FROM jmeter-base

ARG JMETER_VER="5.2"
ENV JMETER_HOME /jmeter/apache-jmeter-$JMETER_VER
ENV PATH $JMETER_HOME/bin:$PATH

WORKDIR /jmeter
COPY run.sh /jmeter/
COPY tests/*.jmx /jmeter/tests/
RUN chmod +x /jmeter/run.sh

ENTRYPOINT ["/bin/bash"]
CMD ["/jmeter/run.sh"]

გაიქეცი.შ

run.sh ეს არის სკრიპტი, რომელიც აწარმოებს JMeter-ს და ინახავს შედეგებს დირექტორიაში files.

სკრიპტის ყოველ ჯერზე გაშვებისას ის შლის წინა ტესტებს, ასე რომ თქვენ შეგიძლიათ მხოლოდ უახლეს მონაცემებთან მუშაობა. მაგრამ ეს არ არის პრობლემა, რადგან თქვენ შეგიძლიათ შეცვალოთ იგი თქვენს საჭიროებებზე.

#!/bin/bash

set -e

if [ -d "/jmeter/reports/files" ]
then
    echo "Directory /jmeter/reports/files exist - OK"
else
    echo "Creating /jmeter/reports/files directory"
    mkdir /jmeter/reports/files
fi

if [ -d "/jmeter/reports/dashboards" ]
then
    echo "Directory /jmeter/reports/dashboards exist"
else
    echo "Creating /jmeter/reports/dashboards directory"
    mkdir /jmeter/reports/dashboards
fi

echo "*** JMeter START Tests ***"

for item in $(ls -1 /jmeter/tests | grep jmx)
do
    echo "*** Removing dashboard directory for $item"
    rm -rdf /jmeter/reports/dashboards/${item}*

    echo "*** Removing tests directory for $item"
    rm -rdf /jmeter/reports/files/${item}*

    echo "*** Testing a $item file ***"
    jmeter -n -t /jmeter/tests/${item} -l /jmeter/reports/files/${item}-report.jtl -e -o /jmeter/reports/dashboards/${item}-dash
done

არის.იამლი

$ tee is.yaml<<EOF
apiVersion: image.openshift.io/v1
kind: ImageStream
metadata:
  generation: 1
  labels:
    build: jmeter-master
  name: jmeter-master
EOF

ძვ.იამლი

$ tee bc.yaml<<EOF
apiVersion: build.openshift.io/v1
kind: BuildConfig
metadata:
  name: jmeter-master
spec:
  failedBuildsHistoryLimit: 5
  nodeSelector: null
  output:
    to:
      kind: ImageStreamTag
      name: 'jmeter-master:latest'
  runPolicy: Serial
  source:
    binary: {}
    type: Binary
  strategy:
    dockerStrategy:
      from:
        kind: ImageStreamTag
        name: 'jmeter-base:latest'
    type: Docker
  successfulBuildsHistoryLimit: 5
EOF

შევქმნათ IS и BC ობიექტები:

$ oc create -f is.yaml -n perftest
$ oc create -f bc.yaml -n perftest

ჩვენ ვაგროვებთ jmeter-master image:

$ oc start-build jmeter-master -n perftest --from-dir=. --follow

სამუშაო

Job-ში გამოიყენება OpenShiftერთი ან მეტის გასაშვებად PODდა გარანტირებულია მათი წარმატებით დასრულება ბრძანების/სკრიპტის შესრულების შემდეგ.

$ tee job.yaml<<EOF
apiVersion: batch/v1
kind: Job
metadata:
  name: jmeter-master
  labels:
    jobName: jmeter-master
spec:
  completions: 1
  parallelism: 1
  template:
    metadata:
      name: jmeter-master
      labels:
        jobName: jmeter-master
    spec:
      containers:
        - name: jmeter-master
          image: 172.30.1.1:5000/perftest/jmeter-master:latest
          volumeMounts:
            - mountPath: /jmeter/reports
              name: jmeter-reports
          imagePullPolicy: Always
      volumes:
        - name: jmeter-reports
          persistentVolumeClaim:
            claimName: jmeter-reports
      restartPolicy: Never
      terminationGracePeriodSeconds: 30
EOF

შექმენით ობიექტი Job:

$ oc create -f job.yaml -n perftest

მოდით შევამოწმოთ სამუშაოს სტატუსი:

$ oc get jobs -n perftest
NAME            DESIRED   SUCCESSFUL   AGE
jmeter-master   1         1            5m

Წაშლა Job მოდით გამოვიყენოთ ბრძანება:

$ oc delete jobs/jmeter-master -n perftest --ignore-not-found=true

ჯენკინსის მილსადენი

ახლა ავტომატიზაცია. მოდით კიდევ ერთხელ გადავხედოთ ნაბიჯებს:

git clone
oc whoami -t
oc start-build ...
oc delete jobs/jmeter-master
oc create -f job.yaml -n perftest

ქვემოთ მოცემულია მილსადენი, რომელშიც შესრულებულია საცავის კლონირება, წაშლა და OpenShift შექმნა Jobს.

#!groovy

pipeline {

    agent any

    stages {

        stage('Start Notifications') {
            steps {
                echo "Sending Email Notification"
            }
            post {
                always {
                    echo "STARTED - Performance Tests"
                    mail(to: '[email protected]', from: "[email protected]", subject: "START - Performance Tests",mimeType: "text/html", body: "<strong>START - Performance Tests</strong><br /><br />Project: Name of Project<br />Environment: PerfTest<br />Build number: ${env.BUILD_NUMBER}<br />Build URL:   ${env.BUILD_URL}"
                }
            }
        }

        stage('Git checkout') {
            steps {
                ...
            }
        }

        stage('Perf Tests') {
            steps {
                script {
                    sh '''
                        OC_CMD1="oc login -u=username -p=PASS -n=perftest 
                        --server=https://...:8443"

                        $OC_CMD1

                        OC_TOKEN=`oc whoami -t`

                        OC_CMD2="oc --token=$OC_TOKEN --server=https://...:8443 
                        start-build jmeter-master -n=perftest --from-dir=./master 
                        --follow=true"

                        OC_CMD3="oc --token=$OC_TOKEN --server=https://...:8443 
                        delete jobs/jmeter-master -n=perftest --ignore-not-found=true"

                        OC_CMD4="oc--token=$OC_TOKEN --server=https://...:8443 
                        create -f ./master/job.yaml -n=perftest"

                        $OC_CMD2
                        $OC_CMD3
                        $OC_CMD4
                    '''
                }
            }
        }

        post {
            failure {
                echo "FAILED - Performance Tests"
                mail(to: '[email protected]', from: "[email protected]", subject: "FAILED - Performance Tests",mimeType: "text/html", body: "<strong>FAILED - Performance Tests</strong><br /><br />Project: Name of Project<br />Environment: PerfTest<br />Build number: ${env.BUILD_NUMBER}<br />Build URL: ${env.BUILD_URL}"
                }

            success {
                echo "SUCCESSED - Performance Tests"
                mail(to: '[email protected]', from: "[email protected]", subject: "SUCCESSED - Performance Tests",mimeType: "text/html", body: "<strong>SUCCESSED - Performance Tests</strong><br /><br />Project: Name of Project<br />Environment: PerfTest<br />Build number: ${env.BUILD_NUMBER}<br />Build URL:   ${env.BUILD_URL}"
            }
        }

    }
}

მას შემდეგ, რაც Pipeline დაასრულებს ფუნქციონირებას, ჩვენ მივიღებთ შეტყობინებას ელექტრონული ფოსტით '[email protected] საწყისი [email protected].

ბმულზე დაწკაპუნებით http://jmeter-web.127.0.0.1.nip.io/ ჩვენ ვნახავთ დირექტორიას files, რომელიც ინახავს ტესტის ანგარიშებს:

ფაილის შინაარსი ya.HTTP.Request.jmx-report.jtk:

timeStamp,elapsed,label,responseCode,responseMessage,threadName,dataType,success,failureMessage,bytes,sentBytes,grpThreads,allThreads,URL,Latency,IdleTime,Connect
1597311456443,569,Yandex - HTTP Request,200,Ok,Thread Group 1-1,text,true,,59449,220,1,1,https://ya.ru/,145,0,57
1597311456443,147,Yandex - HTTP Request-0,302,Found,Thread Group 1-1,,true,,478,110,1,1,http://ya.ru/,145,0,57
1597311456592,420,Yandex - HTTP Request-1,200,Ok,Thread Group 1-1,text,true,,58971,110,1,1,https://ya.ru/,370,0,259

დასკვნა

ამ სტატიაში ნაჩვენებია JMeter ტესტების გაშვების ერთ-ერთი ვარიანტი OpenShift გარემოში. ჩვენ დავასრულეთ ყველა ნაბიჯი ხელით, რის შემდეგაც შევქმენით Jenkins Pipeline ტესტების გაშვების პროცესის ავტომატიზაციისთვის.

წყაროები და დოკუმენტაცია

წყარო: www.habr.com

JMeter ტესტების გაშვება OpenShift-ში Jenkins Pipeline-ის გამოყენებით

პროექტის შექმნა OpenShift-ში

შენახვის შექმნა

JMeter საბაზისო სურათის შექმნა

JMeter WEB

ჯმეტრ-ოსტატი

ჯენკინსის მილსადენი

დასკვნა

წყაროები და დოკუმენტაცია

ახალი კომენტარის დამატება

JMeter ტესტების გაშვება OpenShift-ში Jenkins Pipeline-ის გამოყენებით

პროექტის შექმნა OpenShift-ში

შენახვის შექმნა

JMeter საბაზისო სურათის შექმნა

JMeter WEB

ჯმეტრ-ოსტატი

ჯენკინსის მილსადენი

დასკვნა

წყაროები და დოკუმენტაცია

ახალი კომენტარის დამატება პასუხის გასაუქმებლად

ახალი კომენტარის დამატება