🥇Jenkins Pipeline | көмегімен OpenShift бағдарламасында JMeter сынақтарын орындау ProHoster

Привет!

Бұл мақалада мен Дженкинсті автоматтандыру ретінде пайдалану арқылы OpenShift бағдарламасында JMeter өнімділік сынақтарын іске қосу тәсілдерінің бірін бөліскім келеді. Алдымен біз барлық қажетті қадамдарды жасаймыз (жасау ImageStreams, BuildConfig, Job т.б.) қол режимінде. Осыдан кейін Дженкинс Пайплайн деп жазайық.

Бастапқы нүкте ретінде бізде болуы керек:

OpenShift (v3.11) кластерін іске қосу
OpenShift ішінде жұмыс істеу үшін конфигурацияланған тіркелгі деректері бар Jenkins сервері
файл apache-jmeter-5.2.tgz

Сынақтар ретінде бұл қарапайым болады HTTP Request туралы ya.ru бір ағында.

OpenShift бағдарламасында жоба құру

Жаңа орта құрудан бастайық. Құрайық perftest командасымен қоршалған:

$ oc new-project perftest --display-name="Performance Tests" --description="Performance Tests - JMeter"

Біз автоматты түрде жаңадан жасалған ортаға көшеміз perftest, мынаны тексерейік:

$ oc project
Using project "perftest" on server "https://127.0.0.1:8443".

Сақтауды құру

Сынақ есептері веб-сервермен ортақ сақталады және jmeter-meter'орын - /jmeter/reports.

Storajs-ті қазір жасаған дұрыс, өйткені POD оларға байланысты болады jmeter-web и jmeter-master.

Сақтау туралы толығырақ ақпаратты ресми құжаттамадан таба аласыз Тұрақты сақтау.

үшін yaml файлдарын жасайық PV и PVC.

pv.yaml

$ tee pv.yaml<<EOF
apiVersion: v1
kind: PersistentVolume
metadata:
  name: jmeter-reports
spec:
  capacity:
    storage: 10Gi
  accessModes:
    - ReadWriteMany
  glusterfs:
    endpoints: glusterfs-cluster
    path: /jmeter/reports
    readOnly: false
  persistentVolumeReclaimPolicy: Retain
EOF

pvc.yaml

$ tee pvc.yaml<<EOF
apiVersion: v1
kind: PersistentVolumeClaim
metadata:
  name: jmeter-reports
spec:
  accessModes:
    - ReadWriteMany
  resources:
    requests:
      storage: 10Gi
EOF

Құрайық PV и PVC OpenShift арқылы қоршалған:

$ oc create -f pv.yaml -n perftest
$ oc create -f pvc.yaml -n perftest

Күйін тексеру PVC:

$ oc get pvc -n perftest
NAME             STATUS    VOLUME                                     CAPACITY   ACCESS MODES   STORAGECLASS        AGE
jmeter-reports   Bound     pvc-b0e5f152-db4b-11ea-a497-566f75280024   10Gi       RWX            glusterfs-storage   8m

GUI-де ол келесідей болады:

JMeter негізгі кескінін жасау

Жасауға көшейік ImageStream и BuildConfig.

Сіз барлық қажетті ақпаратты құжаттамада таба аласыз - Құрылымдар және кескін ағындары.

Кескінді құру стратегиясы Docker жергілікті көзден.

Негізгі суретті жасайық jmeter-base, ол үшін негіз болады jmeter-master.

Докер файлы

FROM openjdk:8u212-jdk

ARG JMETER_VER="5.2"
ENV JMETER_HOME /jmeter/apache-jmeter-$JMETER_VER
ENV PATH $JMETER_HOME/bin:$PATH

RUN mkdir -p /jmeter/results 
    && mkdir /jmeter/tests

WORKDIR /jmeter

COPY apache-jmeter-$JMETER_VER.tgz .

RUN tar -xzf $JMETER_HOME.tgz 
    && rm $JMETER_HOME.tgz 
    && ls -la

RUN sed -i s/#server.rmi.ssl.disable=false/server.rmi.ssl.disable=true/ $JMETER_HOME/bin/jmeter.properties

EXPOSE 60000

is.yaml

$ tee is.yaml<<EOF
apiVersion: v1
kind: ImageStream
metadata:
  labels:
    build: jmeter-base
  name: jmeter-base
EOF

bc.yaml

$ tee bc.yaml<<EOF
apiVersion: v1
kind: BuildConfig
metadata:
  name: jmeter-base
spec:
  failedBuildsHistoryLimit: 5
  nodeSelector: null
  output:
    to:
      kind: ImageStreamTag
      name: 'jmeter-base:latest'
  postCommit: {}
  resources: {}
  runPolicy: Serial
  source:
    binary: {}
    type: Binary
  strategy:
    dockerStrategy:
      from:
        kind: ImageStreamTag
        name: 'openjdk:8u212-jdk'
    type: Docker
  successfulBuildsHistoryLimit: 5
EOF

Объектілерді жасайық IS и BC:

$ oc create -f is.yaml -n perftest
$ oc create -f bc.yaml -n perftest

Енді негізгі кескінді құрастырайық jmeter-base:

$ oc start-build jmeter-base -n perftest --from-dir=. --follow

JMeter WEB

jmeter-web Бұл Apache веб-сервері. Оның міндеті - көру үшін сынақ нәтижелері бар каталогты беру.

Дайындалды Dockerfile және конфигурация файлы httpd.conf. Директиваға арналған DocumentRoot мән жиынтығы /jmeter/reports, яғни. сынақ нәтижелері сақталатын каталог.

Докер файлы

$ tee Dockerfile<<EOF
FROM httpd:2.4

COPY httpd.conf /usr/local/apache2/conf/httpd.conf
RUN chmod -R 777 /usr/local/apache2/logs

EXPOSE 8080

CMD ["httpd", "-D", "FOREGROUND"]
EOF

is.yaml

$ tee is.yaml<<EOF
apiVersion: v1
kind: ImageStream
metadata:
  generation: 1
  labels:
    build: jmeter-web
  name: jmeter-web
EOF

bc.yaml

$ tee bc.yaml<<EOF
apiVersion: v1
kind: BuildConfig
metadata:
  name: jmeter-web
spec:
  failedBuildsHistoryLimit: 5
  nodeSelector: null
  output:
    to:
      kind: ImageStreamTag
      name: 'jmeter-web:latest'
  runPolicy: Serial
  source:
    binary: {}
    type: Binary
  strategy:
    dockerStrategy:
      from:
        kind: ImageStreamTag
        name: 'httpd:2.4'
    type: Docker
  successfulBuildsHistoryLimit: 5
EOF

Құрайық ImageStream и BuildConfig нысандар:

$ oc create -f is.yaml -n perftest
$ oc create -f bc.yaml -n perftest

Суретті жинау Dockerfile:

$ oc start-build jmeter-web -n perftest --from-dir=. --follow

dc.yaml

$ tee dc.yaml<<EOF
apiVersion: apps.openshift.io/v1
kind: DeploymentConfig
metadata:
  name: jmeter-web
spec:
  replicas: 1
  template:
    metadata:
      labels:
        name: jmeter-web
    spec:
      containers:
        - image: 172.30.1.1:5000/perftest/jmeter-web
          name: jmeter-web
          volumeMounts:
            - mountPath: /jmeter/reports
              name: jmeter-reports
          ports:
            - containerPort: 80
              protocol: TCP
            - containerPort: 8080
              protocol: TCP
      volumes:
        - name: jmeter-reports
          persistentVolumeClaim:
            claimName: jmeter-reports
EOF

sc.yaml

$ tee sc.yaml<<EOF
apiVersion: v1
kind: Service
metadata:
  labels:
    app: jmeter-web
  name: jmeter-web
spec:
  ports:
    - name: 8080-tcp
      port: 8080
      protocol: TCP
      targetPort: 8080
  selector:
    deploymentconfig: jmeter-web
  sessionAffinity: None
  type: ClusterIP
EOF

Объектілерді жасайық Service и DeploymentConfig:

$ oc create -f sc.yaml -n perftest
$ oc create -f dc.yaml -n perftest

Jmeter-шебер

Apache веб-серверін қолдануды бастайық.

Бұл Dockerfile jmeter-master'a, негізделген jmeter-base, ол сынақтарды іске қосады және нәтижелерді жадқа сақтайды.

Докер файлы

Dockerfile үшін jmeter-master, негізделген jmeter-base.

FROM jmeter-base

ARG JMETER_VER="5.2"
ENV JMETER_HOME /jmeter/apache-jmeter-$JMETER_VER
ENV PATH $JMETER_HOME/bin:$PATH

WORKDIR /jmeter
COPY run.sh /jmeter/
COPY tests/*.jmx /jmeter/tests/
RUN chmod +x /jmeter/run.sh

ENTRYPOINT ["/bin/bash"]
CMD ["/jmeter/run.sh"]

run.sh

run.sh бұл JMeter іске қосатын және нәтижелерді каталогқа сақтайтын сценарий files.

Сценарий іске қосылған сайын ол алдыңғы сынақтарды жояды, сондықтан сіз тек соңғы деректермен жұмыс істей аласыз. Бірақ бұл проблема емес, өйткені оны қажеттіліктеріңізге сай өзгертуге болады.

#!/bin/bash

set -e

if [ -d "/jmeter/reports/files" ]
then
    echo "Directory /jmeter/reports/files exist - OK"
else
    echo "Creating /jmeter/reports/files directory"
    mkdir /jmeter/reports/files
fi

if [ -d "/jmeter/reports/dashboards" ]
then
    echo "Directory /jmeter/reports/dashboards exist"
else
    echo "Creating /jmeter/reports/dashboards directory"
    mkdir /jmeter/reports/dashboards
fi

echo "*** JMeter START Tests ***"

for item in $(ls -1 /jmeter/tests | grep jmx)
do
    echo "*** Removing dashboard directory for $item"
    rm -rdf /jmeter/reports/dashboards/${item}*

    echo "*** Removing tests directory for $item"
    rm -rdf /jmeter/reports/files/${item}*

    echo "*** Testing a $item file ***"
    jmeter -n -t /jmeter/tests/${item} -l /jmeter/reports/files/${item}-report.jtl -e -o /jmeter/reports/dashboards/${item}-dash
done

is.yaml

$ tee is.yaml<<EOF
apiVersion: image.openshift.io/v1
kind: ImageStream
metadata:
  generation: 1
  labels:
    build: jmeter-master
  name: jmeter-master
EOF

bc.yaml

$ tee bc.yaml<<EOF
apiVersion: build.openshift.io/v1
kind: BuildConfig
metadata:
  name: jmeter-master
spec:
  failedBuildsHistoryLimit: 5
  nodeSelector: null
  output:
    to:
      kind: ImageStreamTag
      name: 'jmeter-master:latest'
  runPolicy: Serial
  source:
    binary: {}
    type: Binary
  strategy:
    dockerStrategy:
      from:
        kind: ImageStreamTag
        name: 'jmeter-base:latest'
    type: Docker
  successfulBuildsHistoryLimit: 5
EOF

Құрайық IS и BC нысандар:

$ oc create -f is.yaml -n perftest
$ oc create -f bc.yaml -n perftest

Біз жинаймыз jmeter-master сурет:

$ oc start-build jmeter-master -n perftest --from-dir=. --follow

жұмыс

Job-де қолданылады OpenShift'e біреуін немесе бірнешеуін іске қосу үшін PODпәрменді/скриптті орындағаннан кейін олардың сәтті аяқталуына кепілдік береді.

$ tee job.yaml<<EOF
apiVersion: batch/v1
kind: Job
metadata:
  name: jmeter-master
  labels:
    jobName: jmeter-master
spec:
  completions: 1
  parallelism: 1
  template:
    metadata:
      name: jmeter-master
      labels:
        jobName: jmeter-master
    spec:
      containers:
        - name: jmeter-master
          image: 172.30.1.1:5000/perftest/jmeter-master:latest
          volumeMounts:
            - mountPath: /jmeter/reports
              name: jmeter-reports
          imagePullPolicy: Always
      volumes:
        - name: jmeter-reports
          persistentVolumeClaim:
            claimName: jmeter-reports
      restartPolicy: Never
      terminationGracePeriodSeconds: 30
EOF

Объекті құру Job:

$ oc create -f job.yaml -n perftest

Жұмыстың күйін тексерейік:

$ oc get jobs -n perftest
NAME            DESIRED   SUCCESSFUL   AGE
jmeter-master   1         1            5m

Жою үшін Job пәрменін қолданайық:

$ oc delete jobs/jmeter-master -n perftest --ignore-not-found=true

Дженкинс құбыры

Енді автоматтандыру. Қадамдарды қайталап көрейік:

git clone
oc whoami -t
oc start-build ...
oc delete jobs/jmeter-master
oc create -f job.yaml -n perftest

Төменде репозиторийді клондау, жою және OpenShift жасау орындалатын құбыр желісі берілген Jobның.

#!groovy

pipeline {

    agent any

    stages {

        stage('Start Notifications') {
            steps {
                echo "Sending Email Notification"
            }
            post {
                always {
                    echo "STARTED - Performance Tests"
                    mail(to: '[email protected]', from: "[email protected]", subject: "START - Performance Tests",mimeType: "text/html", body: "<strong>START - Performance Tests</strong><br /><br />Project: Name of Project<br />Environment: PerfTest<br />Build number: ${env.BUILD_NUMBER}<br />Build URL:   ${env.BUILD_URL}"
                }
            }
        }

        stage('Git checkout') {
            steps {
                ...
            }
        }

        stage('Perf Tests') {
            steps {
                script {
                    sh '''
                        OC_CMD1="oc login -u=username -p=PASS -n=perftest 
                        --server=https://...:8443"

                        $OC_CMD1

                        OC_TOKEN=`oc whoami -t`

                        OC_CMD2="oc --token=$OC_TOKEN --server=https://...:8443 
                        start-build jmeter-master -n=perftest --from-dir=./master 
                        --follow=true"

                        OC_CMD3="oc --token=$OC_TOKEN --server=https://...:8443 
                        delete jobs/jmeter-master -n=perftest --ignore-not-found=true"

                        OC_CMD4="oc--token=$OC_TOKEN --server=https://...:8443 
                        create -f ./master/job.yaml -n=perftest"

                        $OC_CMD2
                        $OC_CMD3
                        $OC_CMD4
                    '''
                }
            }
        }

        post {
            failure {
                echo "FAILED - Performance Tests"
                mail(to: '[email protected]', from: "[email protected]", subject: "FAILED - Performance Tests",mimeType: "text/html", body: "<strong>FAILED - Performance Tests</strong><br /><br />Project: Name of Project<br />Environment: PerfTest<br />Build number: ${env.BUILD_NUMBER}<br />Build URL: ${env.BUILD_URL}"
                }

            success {
                echo "SUCCESSED - Performance Tests"
                mail(to: '[email protected]', from: "[email protected]", subject: "SUCCESSED - Performance Tests",mimeType: "text/html", body: "<strong>SUCCESSED - Performance Tests</strong><br /><br />Project: Name of Project<br />Environment: PerfTest<br />Build number: ${env.BUILD_NUMBER}<br />Build URL:   ${env.BUILD_URL}"
            }
        }

    }
}

Pipeline жұмысын аяқтағаннан кейін электрондық пошта арқылы хабарландыру аламыз '[email protected] от [email protected].

Сілтемені басу арқылы http://jmeter-web.127.0.0.1.nip.io/ каталогты көреміз files, ол сынақ есептерін сақтайды:

Файл мазмұны ya.HTTP.Request.jmx-report.jtk:

timeStamp,elapsed,label,responseCode,responseMessage,threadName,dataType,success,failureMessage,bytes,sentBytes,grpThreads,allThreads,URL,Latency,IdleTime,Connect
1597311456443,569,Yandex - HTTP Request,200,Ok,Thread Group 1-1,text,true,,59449,220,1,1,https://ya.ru/,145,0,57
1597311456443,147,Yandex - HTTP Request-0,302,Found,Thread Group 1-1,,true,,478,110,1,1,http://ya.ru/,145,0,57
1597311456592,420,Yandex - HTTP Request-1,200,Ok,Thread Group 1-1,text,true,,58971,110,1,1,https://ya.ru/,370,0,259

қорытынды

Бұл мақала OpenShift ортасында JMeter сынақтарын іске қосу опцияларының бірін көрсетті. Біз барлық қадамдарды қолмен аяқтадық, содан кейін сынақтарды орындау процесін автоматтандыру үшін Jenkins Pipeline құрдық.

Дереккөздер және құжаттама

Ақпарат көзі: www.habr.com

Jenkins Pipeline арқылы OpenShift бағдарламасында JMeter сынақтарын іске қосу

OpenShift бағдарламасында жоба құру

Сақтауды құру

JMeter негізгі кескінін жасау

JMeter WEB

Jmeter-шебер

Дженкинс құбыры

қорытынды

Дереккөздер және құжаттама

пікір қалдыру Жауапты болдырмау