Kubernetes 클러스터에 대한 외부 서비스 모니터링 및 로깅

모두에게 행운을 빕니다.

타사 서비스에서 배포된 시스템으로 메트릭을 로깅하고 수집하는 방법에 대한 일반화된 가이드를 온라인에서 찾지 못했습니다. Kubernetes. 내 솔루션을 게시하고 있습니다. 이 문서에서는 귀하가 이미 작업 중인 것으로 가정합니다. 프로 메테우스 그리고 다른 서비스. 외부 Stateful 서비스를 위한 데이터 소스의 예로는 DBMS가 사용됩니다. PostgreSQL 용기에 도커. 회사에서는 패키지 관리자를 사용합니다. 키, 아래 텍스트에 이에 대한 예가 있습니다. 전체 솔루션에 대해 우리는 사용된 모든 서비스의 중첩 차트를 포함하는 자체 차트를 준비하고 있습니다.

벌채 반출

많은 기업에서는 다양한 기술을 사용하여 로그를 수집, 확인 및 중앙화합니다. 탄성 검색 + 로그 대쉬 + 키바나, 약칭 ELK. 우리의 경우에는 콘텐츠를 인덱싱할 필요가 없으며 더 가벼운 인덱스를 사용했습니다. 로키. Helm 패키지로 제공되며 시스템에 맞게 ingress 및 pv 값을 변경하여 하위 차트로 추가했습니다.

값.yaml

ingress:
  enabled: true
  annotations:
     kubernetes.io/ingress.class: nginx
  hosts:
    - host: kube-loki.example.domain
      paths: 
        - /
  tls: []

....

persistence:
  type: pvc
  enabled: true
  accessModes:
    - ReadWriteOnce
  size: 100Gi
  finalizers:
    - kubernetes.io/pvc-protection
  existingClaim: "pv-loki"

인스턴스에 로그를 보내려면 로키 사용 Loki Docker 로깅 드라이버.

모든 기기에 이 추가 기능을 설치해야 합니다. 도커 로그를 수신하려는 호스트입니다. 데몬에게 패딩 사용 방법을 알려주는 방법에는 여러 가지가 있습니다. yaml에서 드라이버를 선택합니다. 도커 작성의 일부인 책임감있는 플레이북.

postgres.yaml

    - name: Run containers
      docker_compose:
        project_name: main-postgres
        definition:
          version: '3.7'
          services:
            p:
              image: "{{ postgres_version }}"
              container_name: postgresql
              restart: always
              volumes:
                - "{{ postgres_dir }}/data:/var/lib/postgresql/data"
                - "{{ postgres_dir }}/postgres_init_scripts:/docker-entrypoint-initdb.d"
              environment:
                POSTGRES_PASSWORD: {{ postgres_pass }}
                POSTGRES_USER: {{ postgres_user }}
              ports:
                - "{{ postgres_ip }}:{{ postgres_port }}:5432"
              logging:
                driver: "loki"
                options:
                  loki-url: "{{ loki_url }}"
                  loki-batch-size: "{{ loki_batch_size }}"
                  loki-retries: "{{ loki_retries }}"
...

여기서 loki_url: kube-loki.example.domain/loki/api/v1/push

측정항목

지표는 다음을 사용하여 PostgreSQL에서 수집됩니다. postgres_exporter 에 프로 메테우스. 위 파일의 계속 책임감있는 플레이북.

postgres.yaml

...
            pexp:
              image: "wrouesnel/postgres_exporter"
              container_name: pexporter
              restart: unless-stopped
              environment:
                DATA_SOURCE_NAME: "postgresql://{{ postgres_user }}:{{ postgres_pass }}@p:5432/postgres?sslmode=disable"
              ports:
                - "{{ postgres_ip }}:{{ postgres_exporter_port }}:9187"
              logging:
                driver: "json-file"
                options:
                  max-size: "5m"
...

더 명확하게 하기 위해 Endpoints를 사용하여 외부 상태 저장 서비스의 이름을 작성하겠습니다.

postgres-service.yaml

apiVersion: v1
kind: Endpoints
metadata:
  name: postgres-exporter
subsets:
  - addresses:
      - ip: {{ .Values.service.postgres.ip }}
    ports:
      - port: {{ .Values.service.postgres.port }}
        protocol: TCP
---
apiVersion: v1
kind: Service
metadata:
  name: postgres-exporter
  labels:
    chart:  "{{ .Chart.Name }}-{{ .Chart.Version | replace "+" "_" }}"
spec:
  ports:
    - protocol: TCP
      port: {{ .Values.service.postgres.port }}
      targetPort: {{ .Values.service.postgres.port }}

postgres_exporter 데이터를 수신하도록 Prometheus를 구성하는 작업은 하위 차트의 값을 편집하여 수행됩니다.

값.yaml

scrape_configs:
...
  - job_name: postgres-exporter
    static_configs:
      - targets: 
         - postgres-exporter.applicationnamespace.svc.cluster.local:9187
        labels:
          alias: postgres
...

수신된 데이터를 시각화하려면 적절한 대시보드를 설치하십시오.
그라 파나 데이터 소스를 구성합니다. 이는 Grafana 하위 차트의 값을 통해서도 수행할 수 있습니다.

어떻게 보이는지

이 짧은 기사가 이 솔루션의 기본 아이디어를 이해하고 Kubernetes 클러스터에서 Loki/Prometheus에 대한 외부 서비스의 모니터링 및 로깅을 설정할 때 시간을 절약하는 데 도움이 되기를 바랍니다.

출처 : habr.com