Kubernetes क्लस्टरमा बाह्य सेवाहरूको निगरानी र लगिङ

सबैलाई शुभकामना।

मैले तेस्रो-पक्ष सेवाहरूबाट मेट्रिकहरू लगिङ गर्ने र जम्मा गर्ने प्रणालीहरूमा तैनाथ गरिएका प्रणालीहरूमा सामान्यीकृत गाइड अनलाइन फेला पारेको छैन। कुबर्नेट्स। म मेरो समाधान पोस्ट गर्दैछु। यस लेखले मान्दछ कि तपाईसँग पहिले नै काम छ Prometheus र अन्य सेवाहरू। बाह्य स्टेटफुल सेवाको लागि डेटा स्रोतको उदाहरणको रूपमा, एक DBMS प्रयोग गरिनेछ PostgreSQL एउटा कन्टेनरमा डकर। कम्पनीले प्याकेज प्रबन्धक प्रयोग गर्दछ हेलमेट, तलको पाठमा यसमा उदाहरणहरू हुनेछन्। सम्पूर्ण समाधानको लागि, हामी हाम्रो आफ्नै चार्ट तयार गर्दैछौं, जसमा प्रयोग गरिएका सबै सेवाहरूको नेस्टेड चार्टहरू समावेश छन्।

लगिङ

धेरै कम्पनीहरूले लगहरू सङ्कलन गर्न, हेर्न र केन्द्रीकृत गर्न प्रविधिहरूको स्ट्याक प्रयोग गर्छन् Elasticsearch + लगस्ट्याश + किबाना, ELK को रूपमा संक्षिप्त। हाम्रो अवस्थामा, सामग्री अनुक्रमणिका गर्न आवश्यक छैन र मैले अधिक हल्का प्रयोग गरें लोकी। यो हेल्म प्याकेजको रूपमा उपलब्ध छ, हामीले यसलाई हाम्रो प्रणाली अनुरूप प्रवेश र pv को लागि मानहरू परिवर्तन गरेर सबचार्टको रूपमा थप्यौं।

values.yaml

ingress:
  enabled: true
  annotations:
     kubernetes.io/ingress.class: nginx
  hosts:
    - host: kube-loki.example.domain
      paths: 
        - /
  tls: []

....

persistence:
  type: pvc
  enabled: true
  accessModes:
    - ReadWriteOnce
  size: 100Gi
  finalizers:
    - kubernetes.io/pvc-protection
  existingClaim: "pv-loki"

एउटा उदाहरणमा लगहरू पठाउन लोकी प्रयोग गर्नुहोस् लोकी डकर लगिङ चालक.

तपाईंले सबै कुरामा यो एड-अन स्थापना गर्नुपर्छ डकर होस्टहरू जसबाट तपाईँ लगहरू प्राप्त गर्न चाहनुहुन्छ। प्याडिङ कसरी प्रयोग गर्ने भनेर डेमनलाई बताउन धेरै तरिकाहरू छन्। म yaml मा चालक चयन गर्छु डकर रचना गर्नुहोस्, जुन भाग हो अज्ञात प्लेबुक।

postgres.yaml

    - name: Run containers
      docker_compose:
        project_name: main-postgres
        definition:
          version: '3.7'
          services:
            p:
              image: "{{ postgres_version }}"
              container_name: postgresql
              restart: always
              volumes:
                - "{{ postgres_dir }}/data:/var/lib/postgresql/data"
                - "{{ postgres_dir }}/postgres_init_scripts:/docker-entrypoint-initdb.d"
              environment:
                POSTGRES_PASSWORD: {{ postgres_pass }}
                POSTGRES_USER: {{ postgres_user }}
              ports:
                - "{{ postgres_ip }}:{{ postgres_port }}:5432"
              logging:
                driver: "loki"
                options:
                  loki-url: "{{ loki_url }}"
                  loki-batch-size: "{{ loki_batch_size }}"
                  loki-retries: "{{ loki_retries }}"
...

जहाँ loki_url: kube-loki.example.domain/loki/api/v1/push

मेट्रिक्स

मेट्रिक्स प्रयोग गरेर PostgreSQL बाट सङ्कलन गरिन्छ postgres_exporter लागि Prometheus। माथिको फाइलको निरन्तरता अज्ञात प्लेबुक।

postgres.yaml

...
            pexp:
              image: "wrouesnel/postgres_exporter"
              container_name: pexporter
              restart: unless-stopped
              environment:
                DATA_SOURCE_NAME: "postgresql://{{ postgres_user }}:{{ postgres_pass }}@p:5432/postgres?sslmode=disable"
              ports:
                - "{{ postgres_ip }}:{{ postgres_exporter_port }}:9187"
              logging:
                driver: "json-file"
                options:
                  max-size: "5m"
...

थप स्पष्टताको लागि, हामी अन्तिम बिन्दुहरू प्रयोग गरेर बाह्य राज्य सेवाहरूको नाम लेख्नेछौं।

postgres-service.yaml

apiVersion: v1
kind: Endpoints
metadata:
  name: postgres-exporter
subsets:
  - addresses:
      - ip: {{ .Values.service.postgres.ip }}
    ports:
      - port: {{ .Values.service.postgres.port }}
        protocol: TCP
---
apiVersion: v1
kind: Service
metadata:
  name: postgres-exporter
  labels:
    chart:  "{{ .Chart.Name }}-{{ .Chart.Version | replace "+" "_" }}"
spec:
  ports:
    - protocol: TCP
      port: {{ .Values.service.postgres.port }}
      targetPort: {{ .Values.service.postgres.port }}

postgres_exporter डाटा प्राप्त गर्न प्रोमिथियस कन्फिगर गर्ने कार्य सबचार्टमा मानहरू सम्पादन गरेर गरिन्छ।

values.yaml

scrape_configs:
...
  - job_name: postgres-exporter
    static_configs:
      - targets: 
         - postgres-exporter.applicationnamespace.svc.cluster.local:9187
        labels:
          alias: postgres
...

प्राप्त डाटा कल्पना गर्न, उपयुक्त ड्यासबोर्ड स्थापना गर्नुहोस्
ग्राफाना र डेटा स्रोतहरू कन्फिगर गर्नुहोस्। यो Grafana सबचार्टमा मानहरू मार्फत पनि गर्न सकिन्छ।

यो कस्तो देखिन्छ?

मलाई आशा छ कि यो छोटो लेखले तपाईंलाई यस समाधानको पछाडि मुख्य विचारहरू बुझ्न मद्दत गरेको छ र कुबर्नेट्स क्लस्टरमा लोकी/प्रोमेथियसका लागि बाह्य सेवाहरूको अनुगमन र लगिङ सेट अप गर्दा तपाईंको समय बचत गरेको छ।

स्रोत: www.habr.com