ניטור ורישום שירותים חיצוניים לאשכול Kubernetes

בהצלחה לכולם.

לא מצאתי מדריך מקוון על רישום ואיסוף מדדים משירותי צד שלישי למערכות הפרוסות ב קוברנט. אני מפרסם את הפתרון שלי. מאמר זה מניח שכבר יש לך עובד פרומתאוס ושירותים נוספים. כדוגמה למקור נתונים עבור שירות stateful חיצוני, ישמש DBMS PostgreSQL במיכל סַוָר. החברה משתמשת במנהל חבילות הגה, למטה בטקסט יהיו דוגמאות עליו. עבור הפתרון כולו, אנו מכינים תרשים משלנו, הכולל תרשימים מקוננים של כל השירותים שבהם נעשה שימוש.

רישום

חברות רבות משתמשות בערימה של טכנולוגיות כדי לאסוף, להציג ולרכז יומנים Elasticsearch + לוגסטאש + קיבאנה, בקיצור ELK. במקרה שלנו, אין צורך באינדקס של התוכן והשתמשתי בקל משקל יותר לוקי. זה זמין כחבילת Helm, הוספנו אותו כתרשים משנה על ידי שינוי הערכים עבור ingress ו-pv כדי שיתאימו למערכת שלנו.

values.yaml

ingress:
  enabled: true
  annotations:
     kubernetes.io/ingress.class: nginx
  hosts:
    - host: kube-loki.example.domain
      paths: 
        - /
  tls: []

....

persistence:
  type: pvc
  enabled: true
  accessModes:
    - ReadWriteOnce
  size: 100Gi
  finalizers:
    - kubernetes.io/pvc-protection
  existingClaim: "pv-loki"

כדי לשלוח יומנים למופע לוקי שימוש מנהל הלוגינג של לוקי דוקר.

עליך להתקין את התוסף הזה על הכל סַוָר מארחים שמהם ברצונך לקבל יומנים. ישנן מספר דרכים לומר לדמון כיצד להשתמש בריפוד. אני בוחר את הדרייבר ב-yaml דוקר להלחין, שהוא חלק בלתי אפשרי ספר משחק.

postgres.yaml

    - name: Run containers
      docker_compose:
        project_name: main-postgres
        definition:
          version: '3.7'
          services:
            p:
              image: "{{ postgres_version }}"
              container_name: postgresql
              restart: always
              volumes:
                - "{{ postgres_dir }}/data:/var/lib/postgresql/data"
                - "{{ postgres_dir }}/postgres_init_scripts:/docker-entrypoint-initdb.d"
              environment:
                POSTGRES_PASSWORD: {{ postgres_pass }}
                POSTGRES_USER: {{ postgres_user }}
              ports:
                - "{{ postgres_ip }}:{{ postgres_port }}:5432"
              logging:
                driver: "loki"
                options:
                  loki-url: "{{ loki_url }}"
                  loki-batch-size: "{{ loki_batch_size }}"
                  loki-retries: "{{ loki_retries }}"
...

איפה loki_url: kube-loki.example.domain/loki/api/v1/push

מדדים

מדדים נאספים מ-PostgreSQL באמצעות postgres_exporter עבור פרומתאוס. המשך הקובץ לעיל בלתי אפשרי ספר משחק.

postgres.yaml

...
            pexp:
              image: "wrouesnel/postgres_exporter"
              container_name: pexporter
              restart: unless-stopped
              environment:
                DATA_SOURCE_NAME: "postgresql://{{ postgres_user }}:{{ postgres_pass }}@p:5432/postgres?sslmode=disable"
              ports:
                - "{{ postgres_ip }}:{{ postgres_exporter_port }}:9187"
              logging:
                driver: "json-file"
                options:
                  max-size: "5m"
...

לבהירות רבה יותר, נכתוב את השמות של שירותים חיצוניים באמצעות נקודות קצה.

postgres-service.yaml

apiVersion: v1
kind: Endpoints
metadata:
  name: postgres-exporter
subsets:
  - addresses:
      - ip: {{ .Values.service.postgres.ip }}
    ports:
      - port: {{ .Values.service.postgres.port }}
        protocol: TCP
---
apiVersion: v1
kind: Service
metadata:
  name: postgres-exporter
  labels:
    chart:  "{{ .Chart.Name }}-{{ .Chart.Version | replace "+" "_" }}"
spec:
  ports:
    - protocol: TCP
      port: {{ .Values.service.postgres.port }}
      targetPort: {{ .Values.service.postgres.port }}

הגדרת Prometheus לקבלת נתוני postgres_exporter מתבצעת על ידי עריכת ערכים בתרשים המשנה.

values.yaml

scrape_configs:
...
  - job_name: postgres-exporter
    static_configs:
      - targets: 
         - postgres-exporter.applicationnamespace.svc.cluster.local:9187
        labels:
          alias: postgres
...

כדי לדמיין את הנתונים שהתקבלו, התקן את לוח המחוונים המתאים ב
גרפנה ולהגדיר מקורות נתונים. ניתן לעשות זאת גם באמצעות ערכים בתרשים הגראפנה.

איך זה נראה

אני מקווה שמאמר קצר זה עזר לך להבין את הרעיונות העיקריים מאחורי פתרון זה וחסך לך זמן בעת ​​הגדרת ניטור ורישום של שירותים חיצוניים עבור Loki/Prometheus באשכול Kubernetes.

מקור: www.habr.com