Zabbix를 사용하여 PostgreSQL 모니터링

Zabbix Meetup Online에 대한 Daria Vilkova의 보고서

Zabbix를 사용하여 당사에서 개발 중인 PostgreSQL 및 운영 체제 모니터링 도구를 소개하고자 합니다.

Zabbix는 러시아에서 매우 인기 있는 활성 커뮤니티에서 지원하는 오픈 소스 플랫폼이기 때문에 오랫동안 모니터링 도구로 Zabbix를 선택했습니다.

당시 허용된 표준 도구보다 더 유연한 모니터링을 제공하고 메트릭 수집 및 Zabbix 서버로의 전송을 보장하는 활성 에이전트 Mamonsu를 만들었습니다. 우리 회사에서는 Mamonsu가 감사에 사용됩니다.

마몬수

Mamonsu는 PostgreSQL 및 운영 체제를 모니터링하기 위한 활성 에이전트(Zabbix Trapper)입니다. Mamonsu(Python으로 작성)를 사용하면 PostgreSQL 및 운영 체제 모니터링 설정을 XNUMX분 안에 구성할 수 있습니다.

Mamonsu에는 다음과 같은 추가 도구가 있습니다.

• mamonsu tune은 Mamonsu 에이전트가 설치된 머신에 대한 PostgreSQL 구성 파일의 설정을 편집하는 명령입니다.
• mamonsu report는 운영 체제와 PostgreSQL에 대한 답변을 생성하는 명령입니다.

Mamonsu는 DBMS 서버에 설치되어 정보를 수집하고 JSON으로 구성하여 시각화를 위해 Zabbix 서버로 전송합니다. 여기에서 메트릭에 대한 템플릿이 있어야 합니다.

마몬수 작업 방식

특징 Mamonsu

• PostgreSQL을 사용한 효율적인 작업. PostgreSQL에 대한 지속적인 연결은 Mamonsu의 주요 이점입니다. 이 경우 최대 연결 수는 연결하는 최대 데이터베이스 수와 같습니다.
• 확장성. Mamonsu는 완전한 "플러그인" 에이전트이며 각 플러그인의 고정된 구조와 Python의 상대적 단순성으로 인해 새 플러그인을 작성하거나 표준 플러그인(예: 메트릭 수집 매개변수)을 편집하는 방법을 쉽게 배울 수 있습니다.
• 모니터링 지표의 광범위한 적용 범위 확장 관련 지표를 포함한 PotgreSQL의 경우.
• 빠른 실행, 즉시 사용 가능.
• 템플릿 및 구성 파일 업로드, 뿐만 아니라 Zabbix 서버에 업로드합니다.
• 크로스 플랫폼, 국내를 포함하여 다양한 Linux 배포판을 사용하는 고객에게 중요합니다.
• BSD 조항 라이선스.

현재 우리는 많은 플러그인을 제공하고 있으며 다음 버전마다 새로운 것을 추가하려고 합니다.

• PostgreSQL용 플러그인 14개,
• OS Linux용 플러그인 8개,
• OS Windows용 플러그인 4개.

Mamonsu는 110개가 넘는 PostgreSQL 및 운영 체제 메트릭을 수집합니다.

• 70개의 PostgreSQL 지표,
• 40개의 OS Linux 지표,
• 8 OS Windows 지표.

주요 메트릭에는 DBMS 가용성, 연결 수, 데이터베이스 크기, 체크포인트, 읽기/쓰기 속도, 잠금, autovacuum 프로세스 수 및 WAL 생성 속도가 포함됩니다. 사용 가능한 메트릭의 전체 목록과 모든 도구에 대한 자세한 설명은 다음에서 확인할 수 있습니다. 저장소 GitHub 사이트에서.

GitHub에서 사용 가능한 메트릭 목록

5분 만에 마몬수 실행

Mamonsu를 사용하여 PostgreSQL 및 운영 체제 모니터링을 설정하려면 간단한 5단계를 따르면 5분 안에 완료할 수 있습니다.

1. 마몬수 설치. Mamonsu는 소스에서 빌드하거나 사용 가능한 패키지를 사용할 수 있습니다.

$ git clone ... && cd mamonsu && python setup.py

build && python setup.py install

1. 연결 설정. agent.conf 파일에서 PostgreSQL 및 Zabbix 서버에 대한 연결 매개 변수를 설정해야 합니다.

/etc/mamonsu/agent.conf

1. 템플릿을 Zabbix 서버로 내보내기.

$ mamonsu zabbix template export

/usr/share/mamonsu/example.xml

1. Zabbix 서버에 호스트 추가. 내보낸 템플릿은 Zabbix 서버의 새 호스트에 자동으로 연결됩니다.

$ mamonsu zabbix host create mamonsu-demo

1. 출시.

$ service mamonsu start

마몬수 개발방향

Mamonsu 개발의 일환으로 지표를 세분화하고 개별 테이블의 크기를 모니터링하는 플러그인과 같은 새로운 플러그인을 만들 계획입니다. 또한 명령을 통해 자동 조정 기능을 확장할 뿐만 아니라 추가 도구를 개선하고 만들 계획입니다. 마몬수 튠.

Zabbix Agent 2의 일부인 PostgreSQL 모니터링 모듈

빠르고 널리 사용되는 드라이버는 PostgreSQL에 연결하는 데 사용됩니다. pgx (Go용 PG 드라이버 및 툴킷).

지금까지 키로 핸들러를 호출하는 Exporter와 구성 파일에 지정된 서버와의 연결 매개 변수를 읽고 확인하는 Configurator Zabbix Agent 2의 두 가지 인터페이스를 사용하고 있습니다.

메트릭을 그룹화하고 메트릭과 메트릭 그룹에 대한 처리기(handler)를 사용하고 JSON에서 메트릭 그룹을 종속 변수(종속 항목)로 사용하고 하위 수준 검색(발견 규칙)을 사용하여 DBMS 작업을 최적화하려고 했습니다. ).

주요 기능

• 확인 사이에 PostgreSQL에 대한 지속적인 연결 유지
• 유연한 폴링 간격 지원
• 10부터 시작하는 PostgreSQL 버전 및 버전 4.4부터 시작하는 Zabbix Server와의 호환성;
• Zabbix Agent 2를 사용하면 여러 세션을 만들 수 있으므로 여러 PostgreSQL 인스턴스를 동시에 연결하고 모니터링할 수 있습니다.

PostgreSQL 연결 매개변수 수준

총 세 가지 수준의 PostgreSQL 연결 매개변수, 즉 작업 및 설정이 있습니다.

• 글로벌,
• 세션,
• 매크로.

1. 전역 매개변수는 에이전트 수준에서 설정되고 세션 및 매크로 매개변수는 데이터베이스 연결 매개변수를 정의합니다.

2. PostgreSQL에 대한 연결 매개변수 - 세션은 파일에 설정됩니다. zabbix_agent2.conf.

PostgreSQL 연결 옵션 - 세션

• 키워드 뒤 세션 키(템플릿)에 지정되어야 하는 고유한 세션 이름이 지정됩니다.
• 매개 변수 URI и 사용자 이름 모든 세션에 필요합니다.
• 기본 이름을 지정하지 않으면 모든 PostgreSQL 세션에 대한 기본 공통 기본 이름이 사용되며 이는 구성 파일에서도 설정됩니다.

1. PostgreSQL에 대한 연결 매개변수 - 매크로는 템플릿의 메트릭 키에 설정됩니다(Zabbix Agent 1에서 사용되는 방법과 유사). 즉, 템플릿에 생성된 다음 키의 매개변수로 지정됩니다. 이 경우 매크로의 순서는 고정되어 있습니다. 예를 들면 다음과 같습니다. URI 항상 먼저 나열됩니다.

PostgreSQL 연결 매개변수 - 매크로

PostgreSQL 모니터링 모듈에는 다음을 포함하여 상당히 광범위한 PostgreSQL 매개변수를 다룰 수 있는 95개 이상의 지표가 이미 포함되어 있습니다.

• 연결 수
• 데이터베이스 크기,
• wal 파일 보관,
• 검문소,
• "부풀어 오른" 테이블의 수,
• 복제 상태,
• 복제 지연.

PostgreSQL 지표는 운영 체제 매개변수 없이는 유익하지 않습니다. 그러나 Zabbix Agent 2는 이미 운영 체제 매개 변수를 수집하는 방법을 알고 있으므로 전체 그림을 보려면 필요한 템플릿을 호스트에 연결하기만 하면 됩니다.

매니저

핸들러는 요청 자체가 실행되고 메트릭을 수신할 수 있는 모듈의 기본 단위입니다.

간단한 메트릭을 얻으려면:

1. 새 측정항목을 가져올 파일을 만듭니다.

zabbix/src/go/plugins/postgres/handler_uptime.go

1. 패키지를 연결하고 메트릭의 고유 키(키)를 지정합니다.

1. 요청으로 처리기(처리기)를 만듭니다. 즉, 결과를 포함할 변수를 시작합니다.

1. 요청을 실행합니다.

오류 요청을 확인해야 하며 그 후 Zabbix Agent 2 프로세스에서 결과를 선택합니다.

1. 새 측정항목 키를 등록합니다.

메트릭을 등록한 후 새 메트릭으로 에이전트를 다시 빌드할 수 있습니다.

이 모듈은 사이트에서 Zabbix 5.0부터 사용할 수 있습니다. https://www.zabbix.com/download. 이 버전의 Zabbix에서는 매개 변수가 호스트와 포트를 통해 개별적으로 설정됩니다. 곧 출시될 Zabbix 5.0.2에서는 연결 매개변수가 단일 URI로 패키징됩니다.

감사합니다!

유용한 링크

GitHub 마몬수

마몬수 문서

Zabbix 힘내

출처 : habr.com