إجراء اختبارات JMeter في OpenShift باستخدام Jenkins Pipeline

مرحبا بالجميع!

أريد في هذه المقالة مشاركة إحدى الطرق لتشغيل اختبارات أداء JMeter في OpenShift باستخدام Jenkins كأتمتة. أولاً سنقوم بجميع الخطوات اللازمة (إنشاء ImageStreams, BuildConfig, Job الخ) في الوضع اليدوي. بعد ذلك، دعونا نكتب خط أنابيب جينكينز.

كنقطة انطلاق يجب أن يكون لدينا:

  1. تشغيل مجموعة OpenShift (v3.11).
  2. خادم Jenkins ببيانات اعتماد مهيأة للعمل في OpenShift
  3. ملف apache-jmeter-5.2.tgz

كالاختبارات سيكون الأمر بسيطا HTTP Request في ya.ru في تيار واحد.

إنشاء مشروع في OpenShift

لنبدأ بخلق بيئة جديدة. دعونا نخلق perftest محاط بفريق:

$ oc new-project perftest --display-name="Performance Tests" --description="Performance Tests - JMeter"

سيتم نقلنا تلقائيًا إلى البيئة التي تم إنشاؤها حديثًا perftest، دعونا نتحقق من أن الأمر كذلك:

$ oc project
Using project "perftest" on server "https://127.0.0.1:8443".

إنشاء التخزين

سيتم تخزين تقارير الاختبار بشكل مشترك مع خادم الويب و jmeter-meter'مكان - /jmeter/reports.

من الأفضل إنشاء المخازن الآن، لأن PODs سيتم ربطها بهم jmeter-web и jmeter-master.

ستجد معلومات أكثر تفصيلاً حول التخزين في الوثائق الرسمية التخزين المستمر.

لنقم بإنشاء ملفات yaml لـ PV и PVC.

pv.yaml

$ tee pv.yaml<<EOF
apiVersion: v1
kind: PersistentVolume
metadata:
  name: jmeter-reports
spec:
  capacity:
    storage: 10Gi
  accessModes:
    - ReadWriteMany
  glusterfs:
    endpoints: glusterfs-cluster
    path: /jmeter/reports
    readOnly: false
  persistentVolumeReclaimPolicy: Retain
EOF

PVC.yaml

$ tee pvc.yaml<<EOF
apiVersion: v1
kind: PersistentVolumeClaim
metadata:
  name: jmeter-reports
spec:
  accessModes:
    - ReadWriteMany
  resources:
    requests:
      storage: 10Gi
EOF

دعونا نخلق PV и PVC محاط بـ OpenShift:

$ oc create -f pv.yaml -n perftest
$ oc create -f pvc.yaml -n perftest

التحقق من حالة ل PVC:

$ oc get pvc -n perftest
NAME             STATUS    VOLUME                                     CAPACITY   ACCESS MODES   STORAGECLASS        AGE
jmeter-reports   Bound     pvc-b0e5f152-db4b-11ea-a497-566f75280024   10Gi       RWX            glusterfs-storage   8m

إليك ما سيبدو عليه في واجهة المستخدم الرسومية:

إجراء اختبارات JMeter في OpenShift باستخدام Jenkins Pipeline

إنشاء صورة قاعدة JMeter

دعنا ننتقل إلى الخلق ImageStream и BuildConfig.

يمكنك العثور على جميع المعلومات اللازمة في الوثائق - يبني وتدفقات الصور.

استراتيجية بناء الصورة هي Docker من مصدر محلي.

لنقم بإنشاء صورة أساسية jmeter-baseوالتي ستكون الأساس jmeter-master.

Dockerfile

FROM openjdk:8u212-jdk

ARG JMETER_VER="5.2"
ENV JMETER_HOME /jmeter/apache-jmeter-$JMETER_VER
ENV PATH $JMETER_HOME/bin:$PATH

RUN mkdir -p /jmeter/results 
    && mkdir /jmeter/tests

WORKDIR /jmeter

COPY apache-jmeter-$JMETER_VER.tgz .

RUN tar -xzf $JMETER_HOME.tgz 
    && rm $JMETER_HOME.tgz 
    && ls -la

RUN sed -i s/#server.rmi.ssl.disable=false/server.rmi.ssl.disable=true/ $JMETER_HOME/bin/jmeter.properties

EXPOSE 60000

is.yaml

$ tee is.yaml<<EOF
apiVersion: v1
kind: ImageStream
metadata:
  labels:
    build: jmeter-base
  name: jmeter-base
EOF

قبل الميلاد.yaml

$ tee bc.yaml<<EOF
apiVersion: v1
kind: BuildConfig
metadata:
  name: jmeter-base
spec:
  failedBuildsHistoryLimit: 5
  nodeSelector: null
  output:
    to:
      kind: ImageStreamTag
      name: 'jmeter-base:latest'
  postCommit: {}
  resources: {}
  runPolicy: Serial
  source:
    binary: {}
    type: Binary
  strategy:
    dockerStrategy:
      from:
        kind: ImageStreamTag
        name: 'openjdk:8u212-jdk'
    type: Docker
  successfulBuildsHistoryLimit: 5
EOF

دعونا نخلق الكائنات IS и BC:

$ oc create -f is.yaml -n perftest
$ oc create -f bc.yaml -n perftest

الآن دعونا نجمع الصورة الأساسية jmeter-base:

$ oc start-build jmeter-base -n perftest --from-dir=. --follow

جي ميتر ويب

jmeter-web هذا هو خادم ويب أباتشي. وتتمثل مهمتها في توفير دليل بنتائج الاختبار للعرض.

مُعد Dockerfile وملف التكوين httpd.conf. للتوجيه DocumentRoot مجموعة القيمة /jmeter/reports، أي. الدليل الذي يتم حفظ نتائج الاختبار فيه.

Dockerfile

$ tee Dockerfile<<EOF
FROM httpd:2.4

COPY httpd.conf /usr/local/apache2/conf/httpd.conf
RUN chmod -R 777 /usr/local/apache2/logs

EXPOSE 8080

CMD ["httpd", "-D", "FOREGROUND"]
EOF

is.yaml

$ tee is.yaml<<EOF
apiVersion: v1
kind: ImageStream
metadata:
  generation: 1
  labels:
    build: jmeter-web
  name: jmeter-web
EOF

قبل الميلاد.yaml

$ tee bc.yaml<<EOF
apiVersion: v1
kind: BuildConfig
metadata:
  name: jmeter-web
spec:
  failedBuildsHistoryLimit: 5
  nodeSelector: null
  output:
    to:
      kind: ImageStreamTag
      name: 'jmeter-web:latest'
  runPolicy: Serial
  source:
    binary: {}
    type: Binary
  strategy:
    dockerStrategy:
      from:
        kind: ImageStreamTag
        name: 'httpd:2.4'
    type: Docker
  successfulBuildsHistoryLimit: 5
EOF

دعونا نخلق ImageStream и BuildConfig أشياء:

$ oc create -f is.yaml -n perftest
$ oc create -f bc.yaml -n perftest

جمع صورة من Dockerfile:

$ oc start-build jmeter-web -n perftest --from-dir=. --follow

dc.yaml

$ tee dc.yaml<<EOF
apiVersion: apps.openshift.io/v1
kind: DeploymentConfig
metadata:
  name: jmeter-web
spec:
  replicas: 1
  template:
    metadata:
      labels:
        name: jmeter-web
    spec:
      containers:
        - image: 172.30.1.1:5000/perftest/jmeter-web
          name: jmeter-web
          volumeMounts:
            - mountPath: /jmeter/reports
              name: jmeter-reports
          ports:
            - containerPort: 80
              protocol: TCP
            - containerPort: 8080
              protocol: TCP
      volumes:
        - name: jmeter-reports
          persistentVolumeClaim:
            claimName: jmeter-reports
EOF

sc.yaml

$ tee sc.yaml<<EOF
apiVersion: v1
kind: Service
metadata:
  labels:
    app: jmeter-web
  name: jmeter-web
spec:
  ports:
    - name: 8080-tcp
      port: 8080
      protocol: TCP
      targetPort: 8080
  selector:
    deploymentconfig: jmeter-web
  sessionAffinity: None
  type: ClusterIP
EOF

دعونا نخلق الكائنات Service и DeploymentConfig:

$ oc create -f sc.yaml -n perftest
$ oc create -f dc.yaml -n perftest

جميتر-ماستر

لنبدأ في نشر خادم الويب Apache.

هذا هو ملف Dockerfile jmeter-master"أ، على أساس jmeter-base، والذي سيقوم بإجراء الاختبارات وحفظ النتائج للتخزين.

Dockerfile

Dockerfile إلى jmeter-master، مرتكز على jmeter-base.

FROM jmeter-base

ARG JMETER_VER="5.2"
ENV JMETER_HOME /jmeter/apache-jmeter-$JMETER_VER
ENV PATH $JMETER_HOME/bin:$PATH

WORKDIR /jmeter
COPY run.sh /jmeter/
COPY tests/*.jmx /jmeter/tests/
RUN chmod +x /jmeter/run.sh

ENTRYPOINT ["/bin/bash"]
CMD ["/jmeter/run.sh"]

run.sh

run.sh هذا هو البرنامج النصي الذي يقوم بتشغيل JMeter ويحفظ النتائج في الدليل files.

في كل مرة يتم تشغيل البرنامج النصي، فإنه يحذف الاختبارات السابقة، بحيث يمكنك العمل فقط مع أحدث البيانات. ولكن هذه ليست مشكلة، لأنه يمكنك تغييرها لتناسب احتياجاتك.

#!/bin/bash

set -e

if [ -d "/jmeter/reports/files" ]
then
    echo "Directory /jmeter/reports/files exist - OK"
else
    echo "Creating /jmeter/reports/files directory"
    mkdir /jmeter/reports/files
fi

if [ -d "/jmeter/reports/dashboards" ]
then
    echo "Directory /jmeter/reports/dashboards exist"
else
    echo "Creating /jmeter/reports/dashboards directory"
    mkdir /jmeter/reports/dashboards
fi

echo "*** JMeter START Tests ***"

for item in $(ls -1 /jmeter/tests | grep jmx)
do
    echo "*** Removing dashboard directory for $item"
    rm -rdf /jmeter/reports/dashboards/${item}*

    echo "*** Removing tests directory for $item"
    rm -rdf /jmeter/reports/files/${item}*

    echo "*** Testing a $item file ***"
    jmeter -n -t /jmeter/tests/${item} -l /jmeter/reports/files/${item}-report.jtl -e -o /jmeter/reports/dashboards/${item}-dash
done

is.yaml

$ tee is.yaml<<EOF
apiVersion: image.openshift.io/v1
kind: ImageStream
metadata:
  generation: 1
  labels:
    build: jmeter-master
  name: jmeter-master
EOF

قبل الميلاد.yaml

$ tee bc.yaml<<EOF
apiVersion: build.openshift.io/v1
kind: BuildConfig
metadata:
  name: jmeter-master
spec:
  failedBuildsHistoryLimit: 5
  nodeSelector: null
  output:
    to:
      kind: ImageStreamTag
      name: 'jmeter-master:latest'
  runPolicy: Serial
  source:
    binary: {}
    type: Binary
  strategy:
    dockerStrategy:
      from:
        kind: ImageStreamTag
        name: 'jmeter-base:latest'
    type: Docker
  successfulBuildsHistoryLimit: 5
EOF

دعونا نخلق IS и BC أشياء:

$ oc create -f is.yaml -n perftest
$ oc create -f bc.yaml -n perftest

نجمعها jmeter-master صورة:

$ oc start-build jmeter-master -n perftest --from-dir=. --follow

وظيفة

Jobيتم استخدامها في OpenShift'e من أجل تشغيل واحد أو أكثر POD's وضمان إكمالها بنجاح بعد تنفيذ الأمر/البرنامج النصي.

$ tee job.yaml<<EOF
apiVersion: batch/v1
kind: Job
metadata:
  name: jmeter-master
  labels:
    jobName: jmeter-master
spec:
  completions: 1
  parallelism: 1
  template:
    metadata:
      name: jmeter-master
      labels:
        jobName: jmeter-master
    spec:
      containers:
        - name: jmeter-master
          image: 172.30.1.1:5000/perftest/jmeter-master:latest
          volumeMounts:
            - mountPath: /jmeter/reports
              name: jmeter-reports
          imagePullPolicy: Always
      volumes:
        - name: jmeter-reports
          persistentVolumeClaim:
            claimName: jmeter-reports
      restartPolicy: Never
      terminationGracePeriodSeconds: 30
EOF

إنشاء كائن Job:

$ oc create -f job.yaml -n perftest

دعونا نتحقق من حالة الوظيفة:

$ oc get jobs -n perftest
NAME            DESIRED   SUCCESSFUL   AGE
jmeter-master   1         1            5m

لحذف Job دعونا نستخدم الأمر:

$ oc delete jobs/jmeter-master -n perftest --ignore-not-found=true

جينكينز بايبلاين

الآن الأتمتة. دعنا نراجع الخطوات مرة أخرى:

  1. git clone
  2. oc whoami -t
  3. oc start-build ...
  4. oc delete jobs/jmeter-master
  5. oc create -f job.yaml -n perftest

يوجد أدناه خط أنابيب يتم من خلاله إجراء استنساخ المستودع وحذفه وإنشاء OpenShift Job'س.

#!groovy

pipeline {

    agent any

    stages {

        stage('Start Notifications') {
            steps {
                echo "Sending Email Notification"
            }
            post {
                always {
                    echo "STARTED - Performance Tests"
                    mail(to: '[email protected]', from: "[email protected]", subject: "START - Performance Tests",mimeType: "text/html", body: "<strong>START - Performance Tests</strong><br /><br />Project: Name of Project<br />Environment: PerfTest<br />Build number: ${env.BUILD_NUMBER}<br />Build URL:   ${env.BUILD_URL}"
                }
            }
        }

        stage('Git checkout') {
            steps {
                ...
            }
        }

        stage('Perf Tests') {
            steps {
                script {
                    sh '''
                        OC_CMD1="oc login -u=username -p=PASS -n=perftest 
                        --server=https://...:8443"

                        $OC_CMD1

                        OC_TOKEN=`oc whoami -t`

                        OC_CMD2="oc --token=$OC_TOKEN --server=https://...:8443 
                        start-build jmeter-master -n=perftest --from-dir=./master 
                        --follow=true"

                        OC_CMD3="oc --token=$OC_TOKEN --server=https://...:8443 
                        delete jobs/jmeter-master -n=perftest --ignore-not-found=true"

                        OC_CMD4="oc--token=$OC_TOKEN --server=https://...:8443 
                        create -f ./master/job.yaml -n=perftest"

                        $OC_CMD2
                        $OC_CMD3
                        $OC_CMD4
                    '''
                }
            }
        }

        post {
            failure {
                echo "FAILED - Performance Tests"
                mail(to: '[email protected]', from: "[email protected]", subject: "FAILED - Performance Tests",mimeType: "text/html", body: "<strong>FAILED - Performance Tests</strong><br /><br />Project: Name of Project<br />Environment: PerfTest<br />Build number: ${env.BUILD_NUMBER}<br />Build URL: ${env.BUILD_URL}"
                }

            success {
                echo "SUCCESSED - Performance Tests"
                mail(to: '[email protected]', from: "[email protected]", subject: "SUCCESSED - Performance Tests",mimeType: "text/html", body: "<strong>SUCCESSED - Performance Tests</strong><br /><br />Project: Name of Project<br />Environment: PerfTest<br />Build number: ${env.BUILD_NUMBER}<br />Build URL:   ${env.BUILD_URL}"
            }
        }

    }
}

بعد اكتمال تشغيل خط الأنابيب، سنتلقى إشعارًا عبر البريد الإلكتروني '[email protected] من [email protected].

من خلال النقر على الرابط http://jmeter-web.127.0.0.1.nip.io/ سنرى الدليل files، الذي يخزن تقارير الاختبار:

إجراء اختبارات JMeter في OpenShift باستخدام Jenkins Pipeline

محتويات الملف ya.HTTP.Request.jmx-report.jtk:

timeStamp,elapsed,label,responseCode,responseMessage,threadName,dataType,success,failureMessage,bytes,sentBytes,grpThreads,allThreads,URL,Latency,IdleTime,Connect
1597311456443,569,Yandex - HTTP Request,200,Ok,Thread Group 1-1,text,true,,59449,220,1,1,https://ya.ru/,145,0,57
1597311456443,147,Yandex - HTTP Request-0,302,Found,Thread Group 1-1,,true,,478,110,1,1,http://ya.ru/,145,0,57
1597311456592,420,Yandex - HTTP Request-1,200,Ok,Thread Group 1-1,text,true,,58971,110,1,1,https://ya.ru/,370,0,259

اختتام

توضح هذه المقالة أحد الخيارات لتشغيل اختبارات JMeter في بيئة OpenShift. لقد أكملنا جميع الخطوات يدويًا، وبعد ذلك أنشأنا Jenkins Pipeline لأتمتة عملية إجراء الاختبارات.

المصادر والوثائق

المصدر: www.habr.com

إضافة تعليق