გარე სერვისების მონიტორინგი და აღრიცხვა Kubernetes კლასტერში

წარმატებები ყველას.

მე ვერ ვიპოვე განზოგადებული გზამკვლევი ინტერნეტში შესვლისა და მესამე მხარის სერვისებიდან განლაგებულ სისტემებში მეტრიკის შეგროვების შესახებ კუბერნეტები. მე ვაქვეყნებ ჩემს გადაწყვეტას. ეს სტატია ვარაუდობს, რომ თქვენ უკვე გაქვთ სამუშაო პრომეთე და სხვა სერვისები. როგორც გარე სახელმწიფო სერვისის მონაცემთა წყაროს მაგალითი, გამოყენებული იქნება DBMS PostgreSQL კონტეინერში docker. კომპანია იყენებს პაკეტის მენეჯერს საჭესთან, ქვემოთ ტექსტში იქნება მაგალითები მასზე. მთლიანი გადაწყვეტისთვის, ჩვენ ვამზადებთ საკუთარ სქემას, რომელიც მოიცავს ყველა გამოყენებული სერვისის ჩადგმულ დიაგრამებს.

ხე-ტყე

ბევრი კომპანია იყენებს ტექნოლოგიების დასტას ჟურნალების შეგროვების, სანახავად და ცენტრალიზაციისთვის ელასტიური ძებნა + ლოგსტაში + კიბანა, შემოკლებით ELK. ჩვენს შემთხვევაში, არ არის საჭირო შინაარსის ინდექსირება და მე უფრო მსუბუქი წონა გამოვიყენე ლოკი. ის ხელმისაწვდომია Helm-ის პაკეტის სახით, ჩვენ დავამატეთ იგი ქვედიაგრამის სახით, შეცვლით მნიშვნელობების შეღწევისა და pv-ისთვის, რათა მოერგოს ჩვენს სისტემას.

ღირებულებები.yaml

ingress:
  enabled: true
  annotations:
     kubernetes.io/ingress.class: nginx
  hosts:
    - host: kube-loki.example.domain
      paths: 
        - /
  tls: []

....

persistence:
  type: pvc
  enabled: true
  accessModes:
    - ReadWriteOnce
  size: 100Gi
  finalizers:
    - kubernetes.io/pvc-protection
  existingClaim: "pv-loki"

ჟურნალების გაგზავნა მაგალითზე ლოკი გამოყენება Loki Docker Logging Driver.

თქვენ უნდა დააინსტალიროთ ეს დანამატი ყველაფერზე docker მასპინძლები, საიდანაც გსურთ მიიღოთ ჟურნალები. არსებობს რამდენიმე გზა, რომ უთხრათ დემონს როგორ გამოიყენოს ბალიშები. დრაივერს ვირჩევ იამლში Docker შედგენა, რომელიც არის ნაწილი შეუძლებელია სათამაშო წიგნი.

postgres.yaml

    - name: Run containers
      docker_compose:
        project_name: main-postgres
        definition:
          version: '3.7'
          services:
            p:
              image: "{{ postgres_version }}"
              container_name: postgresql
              restart: always
              volumes:
                - "{{ postgres_dir }}/data:/var/lib/postgresql/data"
                - "{{ postgres_dir }}/postgres_init_scripts:/docker-entrypoint-initdb.d"
              environment:
                POSTGRES_PASSWORD: {{ postgres_pass }}
                POSTGRES_USER: {{ postgres_user }}
              ports:
                - "{{ postgres_ip }}:{{ postgres_port }}:5432"
              logging:
                driver: "loki"
                options:
                  loki-url: "{{ loki_url }}"
                  loki-batch-size: "{{ loki_batch_size }}"
                  loki-retries: "{{ loki_retries }}"
...

სადაც loki_url: kube-loki.example.domain/loki/api/v1/push

მეტრიკა

მეტრიკა გროვდება PostgreSQL-დან, გამოყენებით პოსტგრესი_ექსპორტიორი ამისთვის პრომეთე. ზემოაღნიშნული ფაილის გაგრძელება შეუძლებელია სათამაშო წიგნი.

postgres.yaml

...
            pexp:
              image: "wrouesnel/postgres_exporter"
              container_name: pexporter
              restart: unless-stopped
              environment:
                DATA_SOURCE_NAME: "postgresql://{{ postgres_user }}:{{ postgres_pass }}@p:5432/postgres?sslmode=disable"
              ports:
                - "{{ postgres_ip }}:{{ postgres_exporter_port }}:9187"
              logging:
                driver: "json-file"
                options:
                  max-size: "5m"
...

მეტი სიცხადისთვის, ჩვენ დავწერთ გარე სახელმწიფო სერვისების სახელებს ბოლო წერტილების გამოყენებით.

postgres-service.yaml

apiVersion: v1
kind: Endpoints
metadata:
  name: postgres-exporter
subsets:
  - addresses:
      - ip: {{ .Values.service.postgres.ip }}
    ports:
      - port: {{ .Values.service.postgres.port }}
        protocol: TCP
---
apiVersion: v1
kind: Service
metadata:
  name: postgres-exporter
  labels:
    chart:  "{{ .Chart.Name }}-{{ .Chart.Version | replace "+" "_" }}"
spec:
  ports:
    - protocol: TCP
      port: {{ .Values.service.postgres.port }}
      targetPort: {{ .Values.service.postgres.port }}

Prometheus-ის კონფიგურაცია postgres_exporter-ის მონაცემების მისაღებად ხდება მნიშვნელობების ქვესქემაში რედაქტირებით.

ღირებულებები.yaml

scrape_configs:
...
  - job_name: postgres-exporter
    static_configs:
      - targets: 
         - postgres-exporter.applicationnamespace.svc.cluster.local:9187
        labels:
          alias: postgres
...

მიღებული მონაცემების ვიზუალიზაციისთვის დააინსტალირეთ შესაბამისი დაფა
გრაფანა და დააკონფიგურიროთ მონაცემთა წყაროები. ეს ასევე შეიძლება გაკეთდეს Grafana ქვესქემში მოცემული მნიშვნელობებით.

როგორ გამოიყურება

ვიმედოვნებ, რომ ეს მოკლე სტატია დაგეხმარა ამ გადაწყვეტის ძირითადი იდეების გაგებაში და დაზოგე დრო Loki/Prometheus-ისთვის გარე სერვისების მონიტორინგისა და აღრიცხვის დაყენებისას Kubernetes კლასტერში.

წყარო: www.habr.com