🥇Jenkins 파이프라인을 사용하여 OpenShift에서 JMeter 테스트 실행

안녕하십니까!

이 기사에서는 Jenkins를 자동화로 사용하여 OpenShift에서 JMeter 성능 테스트를 실행하는 방법 중 하나를 공유하고 싶습니다. 먼저 필요한 모든 단계를 수행합니다(생성). ImageStreams, BuildConfig, Job 등) 수동 모드에서. 그 후 Jenkins Pipeline을 작성해 보겠습니다.

출발점으로 우리는 다음을 갖추어야 합니다:

OpenShift(v3.11) 클러스터 실행
OpenShift에서 작동하도록 자격 증명이 구성된 Jenkins 서버
файл apache-jmeter-5.2.tgz

테스트로는 간단할 것입니다. HTTP Request 에 ya.ru 하나의 스트림에서.

OpenShift에서 프로젝트 생성

새로운 환경을 만드는 것부터 시작해 보겠습니다. 만들어 보자 perftest 팀으로 둘러싸여 있습니다.

$ oc new-project perftest --display-name="Performance Tests" --description="Performance Tests - JMeter"

새로 생성된 환경으로 자동 이동됩니다. perftest, 이것이 맞는지 확인해 보겠습니다.

$ oc project
Using project "perftest" on server "https://127.0.0.1:8443".

스토리지 생성

테스트 보고서는 웹 서버와 공통으로 저장되며 jmeter-meter'장소 - /jmeter/reports.

POD가 여기에 연결되므로 지금 Storajs를 생성하는 것이 더 좋습니다. jmeter-web и jmeter-master.

공식 문서에서 스토리지에 대한 자세한 정보를 확인할 수 있습니다. 영구 저장.

yaml 파일을 만들어 보겠습니다. PV и PVC.

pv.yaml

$ tee pv.yaml<<EOF
apiVersion: v1
kind: PersistentVolume
metadata:
  name: jmeter-reports
spec:
  capacity:
    storage: 10Gi
  accessModes:
    - ReadWriteMany
  glusterfs:
    endpoints: glusterfs-cluster
    path: /jmeter/reports
    readOnly: false
  persistentVolumeReclaimPolicy: Retain
EOF

PVC.yaml

$ tee pvc.yaml<<EOF
apiVersion: v1
kind: PersistentVolumeClaim
metadata:
  name: jmeter-reports
spec:
  accessModes:
    - ReadWriteMany
  resources:
    requests:
      storage: 10Gi
EOF

만들자 PV и PVC OpenShift로 둘러싸여 있습니다.

$ oc create -f pv.yaml -n perftest
$ oc create -f pvc.yaml -n perftest

상태 확인 중 PVC:

$ oc get pvc -n perftest
NAME             STATUS    VOLUME                                     CAPACITY   ACCESS MODES   STORAGECLASS        AGE
jmeter-reports   Bound     pvc-b0e5f152-db4b-11ea-a497-566f75280024   10Gi       RWX            glusterfs-storage   8m

GUI에서는 다음과 같이 표시됩니다.

JMeter 기본 이미지 생성

만들기로 넘어 갑시다 ImageStream и BuildConfig.

문서에서 필요한 모든 정보를 찾을 수 있습니다. 빌드 및 이미지 스트림.

이미지 구축 전략은 다음과 같습니다. Docker 현지 소스에서.

기본 이미지를 만들어보자 jmeter-base, 이는 다음의 기초가 될 것입니다. jmeter-master.

도커 파일

FROM openjdk:8u212-jdk

ARG JMETER_VER="5.2"
ENV JMETER_HOME /jmeter/apache-jmeter-$JMETER_VER
ENV PATH $JMETER_HOME/bin:$PATH

RUN mkdir -p /jmeter/results 
    && mkdir /jmeter/tests

WORKDIR /jmeter

COPY apache-jmeter-$JMETER_VER.tgz .

RUN tar -xzf $JMETER_HOME.tgz 
    && rm $JMETER_HOME.tgz 
    && ls -la

RUN sed -i s/#server.rmi.ssl.disable=false/server.rmi.ssl.disable=true/ $JMETER_HOME/bin/jmeter.properties

EXPOSE 60000

is.yaml

$ tee is.yaml<<EOF
apiVersion: v1
kind: ImageStream
metadata:
  labels:
    build: jmeter-base
  name: jmeter-base
EOF

bc.yaml

$ tee bc.yaml<<EOF
apiVersion: v1
kind: BuildConfig
metadata:
  name: jmeter-base
spec:
  failedBuildsHistoryLimit: 5
  nodeSelector: null
  output:
    to:
      kind: ImageStreamTag
      name: 'jmeter-base:latest'
  postCommit: {}
  resources: {}
  runPolicy: Serial
  source:
    binary: {}
    type: Binary
  strategy:
    dockerStrategy:
      from:
        kind: ImageStreamTag
        name: 'openjdk:8u212-jdk'
    type: Docker
  successfulBuildsHistoryLimit: 5
EOF

객체를 생성해보자 IS и BC:

$ oc create -f is.yaml -n perftest
$ oc create -f bc.yaml -n perftest

이제 기본 이미지를 조립해 보겠습니다. jmeter-base:

$ oc start-build jmeter-base -n perftest --from-dir=. --follow

JMeter 웹

jmeter-web 이것은 Apache 웹 서버입니다. 그 임무는 볼 수 있는 테스트 결과가 있는 디렉토리를 제공하는 것입니다.

준비된 Dockerfile 및 구성 파일 httpd.conf. 지시문의 경우 DocumentRoot 값 세트 /jmeter/reports, 즉. 테스트 결과가 저장되는 디렉터리입니다.

도커 파일

$ tee Dockerfile<<EOF
FROM httpd:2.4

COPY httpd.conf /usr/local/apache2/conf/httpd.conf
RUN chmod -R 777 /usr/local/apache2/logs

EXPOSE 8080

CMD ["httpd", "-D", "FOREGROUND"]
EOF

is.yaml

$ tee is.yaml<<EOF
apiVersion: v1
kind: ImageStream
metadata:
  generation: 1
  labels:
    build: jmeter-web
  name: jmeter-web
EOF

bc.yaml

$ tee bc.yaml<<EOF
apiVersion: v1
kind: BuildConfig
metadata:
  name: jmeter-web
spec:
  failedBuildsHistoryLimit: 5
  nodeSelector: null
  output:
    to:
      kind: ImageStreamTag
      name: 'jmeter-web:latest'
  runPolicy: Serial
  source:
    binary: {}
    type: Binary
  strategy:
    dockerStrategy:
      from:
        kind: ImageStreamTag
        name: 'httpd:2.4'
    type: Docker
  successfulBuildsHistoryLimit: 5
EOF

만들자 ImageStream и BuildConfig 사물:

$ oc create -f is.yaml -n perftest
$ oc create -f bc.yaml -n perftest

에서 이미지 수집 Dockerfile:

$ oc start-build jmeter-web -n perftest --from-dir=. --follow

dc.yaml

$ tee dc.yaml<<EOF
apiVersion: apps.openshift.io/v1
kind: DeploymentConfig
metadata:
  name: jmeter-web
spec:
  replicas: 1
  template:
    metadata:
      labels:
        name: jmeter-web
    spec:
      containers:
        - image: 172.30.1.1:5000/perftest/jmeter-web
          name: jmeter-web
          volumeMounts:
            - mountPath: /jmeter/reports
              name: jmeter-reports
          ports:
            - containerPort: 80
              protocol: TCP
            - containerPort: 8080
              protocol: TCP
      volumes:
        - name: jmeter-reports
          persistentVolumeClaim:
            claimName: jmeter-reports
EOF

sc.yaml

$ tee sc.yaml<<EOF
apiVersion: v1
kind: Service
metadata:
  labels:
    app: jmeter-web
  name: jmeter-web
spec:
  ports:
    - name: 8080-tcp
      port: 8080
      protocol: TCP
      targetPort: 8080
  selector:
    deploymentconfig: jmeter-web
  sessionAffinity: None
  type: ClusterIP
EOF

객체를 생성해보자 Service и DeploymentConfig:

$ oc create -f sc.yaml -n perftest
$ oc create -f dc.yaml -n perftest

Jmeter-마스터

Apache 웹 서버 배포를 시작해 보겠습니다.

도커파일입니다 jmeter-master'아, 기반으로 jmeter-base, 테스트를 실행하고 결과를 저장소에 저장합니다.

도커 파일

Dockerfile 에 jmeter-master, 기반 jmeter-base.

FROM jmeter-base

ARG JMETER_VER="5.2"
ENV JMETER_HOME /jmeter/apache-jmeter-$JMETER_VER
ENV PATH $JMETER_HOME/bin:$PATH

WORKDIR /jmeter
COPY run.sh /jmeter/
COPY tests/*.jmx /jmeter/tests/
RUN chmod +x /jmeter/run.sh

ENTRYPOINT ["/bin/bash"]
CMD ["/jmeter/run.sh"]

실행.sh

run.sh 이것은 JMeter를 실행하고 결과를 디렉토리에 저장하는 스크립트입니다. files.

스크립트가 실행될 때마다 이전 테스트가 삭제되므로 최신 데이터로만 작업할 수 있습니다. 하지만 필요에 따라 변경할 수 있기 때문에 문제가 되지 않습니다.

#!/bin/bash

set -e

if [ -d "/jmeter/reports/files" ]
then
    echo "Directory /jmeter/reports/files exist - OK"
else
    echo "Creating /jmeter/reports/files directory"
    mkdir /jmeter/reports/files
fi

if [ -d "/jmeter/reports/dashboards" ]
then
    echo "Directory /jmeter/reports/dashboards exist"
else
    echo "Creating /jmeter/reports/dashboards directory"
    mkdir /jmeter/reports/dashboards
fi

echo "*** JMeter START Tests ***"

for item in $(ls -1 /jmeter/tests | grep jmx)
do
    echo "*** Removing dashboard directory for $item"
    rm -rdf /jmeter/reports/dashboards/${item}*

    echo "*** Removing tests directory for $item"
    rm -rdf /jmeter/reports/files/${item}*

    echo "*** Testing a $item file ***"
    jmeter -n -t /jmeter/tests/${item} -l /jmeter/reports/files/${item}-report.jtl -e -o /jmeter/reports/dashboards/${item}-dash
done

is.yaml

$ tee is.yaml<<EOF
apiVersion: image.openshift.io/v1
kind: ImageStream
metadata:
  generation: 1
  labels:
    build: jmeter-master
  name: jmeter-master
EOF

bc.yaml

$ tee bc.yaml<<EOF
apiVersion: build.openshift.io/v1
kind: BuildConfig
metadata:
  name: jmeter-master
spec:
  failedBuildsHistoryLimit: 5
  nodeSelector: null
  output:
    to:
      kind: ImageStreamTag
      name: 'jmeter-master:latest'
  runPolicy: Serial
  source:
    binary: {}
    type: Binary
  strategy:
    dockerStrategy:
      from:
        kind: ImageStreamTag
        name: 'jmeter-base:latest'
    type: Docker
  successfulBuildsHistoryLimit: 5
EOF

만들자 IS и BC 사물:

$ oc create -f is.yaml -n perftest
$ oc create -f bc.yaml -n perftest

우리는 수집합니다 jmeter-master 영상:

$ oc start-build jmeter-master -n perftest --from-dir=. --follow

일

Job는 다음에서 사용됩니다. OpenShift'e 하나 이상을 실행하려면 POD명령/스크립트를 실행한 후 성공적인 완료를 보장합니다.

$ tee job.yaml<<EOF
apiVersion: batch/v1
kind: Job
metadata:
  name: jmeter-master
  labels:
    jobName: jmeter-master
spec:
  completions: 1
  parallelism: 1
  template:
    metadata:
      name: jmeter-master
      labels:
        jobName: jmeter-master
    spec:
      containers:
        - name: jmeter-master
          image: 172.30.1.1:5000/perftest/jmeter-master:latest
          volumeMounts:
            - mountPath: /jmeter/reports
              name: jmeter-reports
          imagePullPolicy: Always
      volumes:
        - name: jmeter-reports
          persistentVolumeClaim:
            claimName: jmeter-reports
      restartPolicy: Never
      terminationGracePeriodSeconds: 30
EOF

개체 만들기 Job:

$ oc create -f job.yaml -n perftest

작업 상태를 확인해 보겠습니다.

$ oc get jobs -n perftest
NAME            DESIRED   SUCCESSFUL   AGE
jmeter-master   1         1            5m

지우는 것 Job 다음 명령을 사용해보자:

$ oc delete jobs/jmeter-master -n perftest --ignore-not-found=true

젠킨스 파이프라인

이제 자동화. 단계를 다시 살펴보겠습니다.

git clone
oc whoami -t
oc start-build ...
oc delete jobs/jmeter-master
oc create -f job.yaml -n perftest

아래는 저장소 복제, 삭제, OpenShift 생성을 수행하는 파이프라인입니다. Job'에스.

#!groovy

pipeline {

    agent any

    stages {

        stage('Start Notifications') {
            steps {
                echo "Sending Email Notification"
            }
            post {
                always {
                    echo "STARTED - Performance Tests"
                    mail(to: '[email protected]', from: "[email protected]", subject: "START - Performance Tests",mimeType: "text/html", body: "<strong>START - Performance Tests</strong><br /><br />Project: Name of Project<br />Environment: PerfTest<br />Build number: ${env.BUILD_NUMBER}<br />Build URL:   ${env.BUILD_URL}"
                }
            }
        }

        stage('Git checkout') {
            steps {
                ...
            }
        }

        stage('Perf Tests') {
            steps {
                script {
                    sh '''
                        OC_CMD1="oc login -u=username -p=PASS -n=perftest 
                        --server=https://...:8443"

                        $OC_CMD1

                        OC_TOKEN=`oc whoami -t`

                        OC_CMD2="oc --token=$OC_TOKEN --server=https://...:8443 
                        start-build jmeter-master -n=perftest --from-dir=./master 
                        --follow=true"

                        OC_CMD3="oc --token=$OC_TOKEN --server=https://...:8443 
                        delete jobs/jmeter-master -n=perftest --ignore-not-found=true"

                        OC_CMD4="oc--token=$OC_TOKEN --server=https://...:8443 
                        create -f ./master/job.yaml -n=perftest"

                        $OC_CMD2
                        $OC_CMD3
                        $OC_CMD4
                    '''
                }
            }
        }

        post {
            failure {
                echo "FAILED - Performance Tests"
                mail(to: '[email protected]', from: "[email protected]", subject: "FAILED - Performance Tests",mimeType: "text/html", body: "<strong>FAILED - Performance Tests</strong><br /><br />Project: Name of Project<br />Environment: PerfTest<br />Build number: ${env.BUILD_NUMBER}<br />Build URL: ${env.BUILD_URL}"
                }

            success {
                echo "SUCCESSED - Performance Tests"
                mail(to: '[email protected]', from: "[email protected]", subject: "SUCCESSED - Performance Tests",mimeType: "text/html", body: "<strong>SUCCESSED - Performance Tests</strong><br /><br />Project: Name of Project<br />Environment: PerfTest<br />Build number: ${env.BUILD_NUMBER}<br />Build URL:   ${env.BUILD_URL}"
            }
        }

    }
}

Pipeline 작업이 완료되면 이메일로 알림을 받게 됩니다. '[email protected] 부터 [email protected].

링크를 클릭하면 http://jmeter-web.127.0.0.1.nip.io/ 우리는 디렉토리를 볼 것입니다 files, 테스트 보고서를 저장합니다.

파일 내용 ya.HTTP.Request.jmx-report.jtk:

timeStamp,elapsed,label,responseCode,responseMessage,threadName,dataType,success,failureMessage,bytes,sentBytes,grpThreads,allThreads,URL,Latency,IdleTime,Connect
1597311456443,569,Yandex - HTTP Request,200,Ok,Thread Group 1-1,text,true,,59449,220,1,1,https://ya.ru/,145,0,57
1597311456443,147,Yandex - HTTP Request-0,302,Found,Thread Group 1-1,,true,,478,110,1,1,http://ya.ru/,145,0,57
1597311456592,420,Yandex - HTTP Request-1,200,Ok,Thread Group 1-1,text,true,,58971,110,1,1,https://ya.ru/,370,0,259

결론

이 기사에서는 OpenShift 환경에서 JMeter 테스트를 실행하기 위한 옵션 중 하나를 보여주었습니다. 모든 단계를 수동으로 완료한 후 Jenkins Pipeline을 만들어 테스트 실행 프로세스를 자동화했습니다.

소스 및 문서

출처 : habr.com

Jenkins Pipeline을 사용하여 OpenShift에서 JMeter 테스트 실행

OpenShift에서 프로젝트 생성

스토리지 생성

JMeter 기본 이미지 생성

JMeter 웹

Jmeter-마스터

젠킨스 파이프라인

결론

소스 및 문서

코멘트를 추가 답장을 취소