PostgreSQL-ის მონიტორინგი Zabbix-ის გამოყენებით

დარია ვილკოვას მოხსენება Zabbix Meetup Online-ისთვის

მინდა გაგაცნოთ PostgreSQL და ოპერაციული სისტემის მონიტორინგის ინსტრუმენტი, რომელსაც ჩვენი კომპანია Zabbix-ის გამოყენებით ამუშავებს.

ჩვენ ავირჩიეთ Zabbix, როგორც ჩვენი მონიტორინგის ინსტრუმენტი დიდი ხნის განმავლობაში, რადგან ეს არის ღია კოდის პლატფორმა, რომელსაც მხარს უჭერს აქტიური საზოგადოება, რომელიც ძალიან პოპულარულია რუსეთში.

ჩვენ შევქმენით აქტიური აგენტი - Mamonsu, რომელიც უზრუნველყოფდა უფრო მოქნილ მონიტორინგს, ვიდრე იმ დროისთვის სტანდარტული ინსტრუმენტები იყო დაშვებული და უზრუნველყოფდა მეტრიკის შეგროვებას და მათ გაგზავნას Zabbix სერვერზე. ჩვენს კომპანიაში Mamonsu გამოიყენება აუდიტში.

მამონსუ

Mamonsu არის აქტიური აგენტი (Zabbix Trapper) PostgreSQL-ისა და ოპერაციული სისტემის მონიტორინგისთვის. Mamonsu (დაწერილი პითონში) საშუალებას გაძლევთ დააკონფიგურიროთ PostgreSQL და ოპერაციული სისტემის მონიტორინგის პარამეტრები ხუთ წუთში.

Mamonsu-ს აქვს დამატებითი ხელსაწყოები:

• mamonsu tune არის ბრძანება, რომელიც არედაქტირებს პარამეტრებს PostgreSQL კონფიგურაციის ფაილში იმ მანქანისთვის, რომელზეც დაინსტალირებულია Mamonsu აგენტი.
• mamonsu report არის ბრძანება, რომელიც ქმნის პასუხებს ოპერაციული სისტემის და PostgreSQL-ის შესახებ.

Mamonsu დაინსტალირებულია DBMS სერვერზე, აგროვებს ინფორმაციას, აყალიბებს მას JSON-ში, რომელიც აგზავნის მას Zabbix სერვერზე ვიზუალიზაციისთვის, სადაც უნდა იყოს შაბლონი მისი მეტრიკებისთვის.

მამონსუს სამუშაო სქემა

მახასიათებლები Mamonsu

• ეფექტური მუშაობა PostgreSQL-თან. PostgreSQL-თან მუდმივი კავშირი Mamonsu-ს მთავარი უპირატესობაა. ამ შემთხვევაში, კავშირების მაქსიმალური რაოდენობა უდრის მონაცემთა ბაზების მაქსიმალურ რაოდენობას, რომლებთანაც ის უკავშირდება.
• გაფართოებადობა. Mamonsu არის სრულად "დამატებითი" აგენტი და თითოეული მოდულის ფიქსირებული სტრუქტურისა და Python-ის შედარებითი სიმარტივის გამო, შეგიძლიათ მარტივად ისწავლოთ როგორ დაწეროთ ახალი ან შეცვალოთ სტანდარტული დანამატები, ანუ მეტრიკის შეგროვების პარამეტრები.
• მონიტორინგის მეტრიკის ფართო გაშუქება PotgreSQL-სთვის, გაფართოების სპეციფიკური მეტრიკის ჩათვლით.
• სწრაფი გაშვება, ხელმისაწვდომობა ყუთიდან.
• შაბლონების და კონფიგურაციის ფაილების ატვირთვა, ასევე Zabbix სერვერზე ატვირთვა.
• ჯვარედინი პლატფორმა, რაც მნიშვნელოვანია ჩვენი მომხმარებლებისთვის, რომლებიც იყენებენ Linux-ის სხვადასხვა დისტრიბუციას, მათ შორის შიდა.
• BSD-პუნქტის ლიცენზია.

ამ დროისთვის ჩვენ გთავაზობთ უამრავ დანამატს და ყოველ მომდევნო ვერსიაში ვცდილობთ დავამატოთ რაიმე ახალი.

• 14 მოდული PostgreSQL-სთვის,
• 8 დანამატი OS Linux-ისთვის,
• 4 მოდული OS Windows-ისთვის.

Mamonsu აგროვებს 110-ზე მეტ PostgreSQL და ოპერაციული სისტემის მეტრიკას:

• 70 PostgreSQL მეტრიკა,
• 40 OS Linux მეტრიკა,
• 8 OS Windows მეტრიკა.

ძირითადი მეტრიკა მოიცავს DBMS ხელმისაწვდომობას, კავშირების რაოდენობას, მონაცემთა ბაზის ზომას, გამშვებ პუნქტებს, წაკითხვის/ჩაწერის სიჩქარეს, ჩაკეტვას, ავტოვაკუუმის პროცესების რაოდენობას და WAL წარმოების სიჩქარეს. ხელმისაწვდომი მეტრიკის სრული სია, ისევე როგორც ყველა ხელსაწყოს დეტალური აღწერა, ხელმისაწვდომია საცავები GitHub საიტზე.

ხელმისაწვდომი მეტრიკის სია GitHub-ზე

გაუშვით მამონსუ 5 წუთში

Mamonsu-ს გამოყენებით PostgreSQL-ისა და ოპერაციული სისტემის მონიტორინგის დასაყენებლად, ამის გაკეთება შეგიძლიათ 5 წუთში 5 მარტივი ნაბიჯის შემდეგ.

1. Mamonsu-ს ინსტალაცია. Mamonsu შეიძლება აშენდეს წყაროდან ან გამოიყენოთ ხელმისაწვდომი პაკეტები.

$ git clone ... && cd mamonsu && python setup.py

build && python setup.py install

1. კავშირის დაყენება. აუცილებელია PostgreSQL-ისა და Zabbix Server-ის კავშირის პარამეტრების დაყენება agent.conf ფაილში.

/etc/mamonsu/agent.conf

1. შაბლონის ექსპორტი Zabbix სერვერზე.

$ mamonsu zabbix template export

/usr/share/mamonsu/example.xml

1. ჰოსტის დამატება Zabbix სერვერზე. ექსპორტირებული შაბლონი ავტომატურად დაუკავშირდება ახალ ჰოსტს Zabbix სერვერზე.

$ mamonsu zabbix host create mamonsu-demo

1. Запуск.

$ service mamonsu start

მამონსუს განვითარების მიმართულებები

Mamonsu-ს განვითარების ფარგლებში, ჩვენ ვგეგმავთ მეტრიკის დახვეწას და ახალი დანამატების შექმნას, როგორიცაა დანამატი ცალკეული ცხრილების ზომის მონიტორინგისთვის. ჩვენ ასევე ვგეგმავთ გაუმჯობესებას და დამატებით ინსტრუმენტების შექმნას, ასევე ბრძანების მეშვეობით ავტომატური რეგულირების შესაძლებლობების გაფართოებას მამონსუს მელოდია.

PostgreSQL მონიტორინგის მოდული, როგორც Zabbix Agent 2-ის ნაწილი

სწრაფი და პოპულარული დრაივერი გამოიყენება PostgreSQL-თან დასაკავშირებლად pgx (PG დრაივერი და ინსტრუმენტების ნაკრები Go-სთვის).

ჯერჯერობით, ჩვენ ვიყენებთ ორ ინტერფეისს: ექსპორტიორს, რომელიც უწოდებს დამმუშავებელს გასაღებით და კონფიგურატორი Zabbix Agent 2, რომელიც კითხულობს და ამოწმებს კავშირის პარამეტრებს კონფიგურაციის ფაილში მითითებულ სერვერთან.

ჩვენ ვცდილობდით DBMS-ის მუშაობის ოპტიმიზაციას მეტრიკის დაჯგუფებით და დამმუშავებლის (დამმუშავებლის) გამოყენებით მეტრიკისა და მეტრიკული ჯგუფებისთვის, ასევე მეტრიკის ჯგუფების გამოყენება JSON-ში, როგორც დამოკიდებულ ცვლადებად (დამოკიდებულების ერთეულები) და დაბალი დონის აღმოჩენით (აღმოჩენის წესები). ).

ძირითადი მახასიათებლები

• ჩეკებს შორის PostgreSQL-თან მუდმივი კავშირის შენარჩუნება;
• მოქნილი კენჭისყრის ინტერვალების მხარდაჭერა;
• თავსებადობა PostgreSQL ვერსიებთან 10-დან და Zabbix სერვერთან 4.4 ვერსიიდან დაწყებული;
• ერთდროულად რამდენიმე PostgreSQL ინსტანციის დაკავშირების და მონიტორინგის შესაძლებლობა იმის გამო, რომ Zabbix Agent 2 საშუალებას გაძლევთ შექმნათ მრავალი სესია.

PostgreSQL კავშირის პარამეტრის დონეები

საერთო ჯამში, ხელმისაწვდომია PostgreSQL კავშირის პარამეტრების სამი დონე, ანუ ამოცანები და პარამეტრები:

• გლობალური,
• სესია,
• მაკროები.

1. გლობალური პარამეტრები დაყენებულია აგენტის დონეზე, Session და Macros პარამეტრები განსაზღვრავს მონაცემთა ბაზის კავშირის პარამეტრებს.

2. კავშირის პარამეტრები PostgreSQL-თან - სესიები მითითებულია ფაილში zabbix_agent2.conf.

PostgreSQL კავშირის პარამეტრები - სესიები

• საკვანძო სიტყვის შემდეგ სესიები მითითებულია სესიის უნიკალური სახელი, რომელიც უნდა იყოს მითითებული გასაღებში (თარგი).
• პარამეტრები URI и მომხმარებლის სახელი საჭიროა ყოველი სესიისთვის.
• თუ ბაზის სახელი არ არის მითითებული, გამოიყენება ნაგულისხმევი საერთო საბაზისო სახელი ყველა PostgreSQL სესიისთვის, რომელიც ასევე მითითებულია კონფიგურაციის ფაილში.

1. PostgreSQL-თან დაკავშირების პარამეტრები - მაკრო დაყენებულია შაბლონის მეტრულ კლავიშში ( Zabbix Agent 1-ში გამოყენებული მეთოდის მსგავსად), ანუ ისინი იქმნება შაბლონში და შემდეგ მითითებულია კლავიშში პარამეტრებად. ამ შემთხვევაში, მაკროების თანმიმდევრობა ფიქსირდება, ე.ი., მაგალითად, URI ყოველთვის პირველ რიგში.

PostgreSQL კავშირის პარამეტრები - მაკროები

PostgreSQL მონიტორინგის მოდული უკვე მოიცავს 95-ზე მეტ მეტრიკას, რომელიც საშუალებას გაძლევთ დაფაროთ PostgreSQL პარამეტრების საკმაოდ ფართო სპექტრი, მათ შორის:

• კავშირების რაოდენობა
• მონაცემთა ბაზის ზომა,
• wal ფაილების დაარქივება,
• საგუშაგოები,
• "გაბერილი" ცხრილების რაოდენობა,
• რეპლიკაციის სტატუსი,
• ასლის შეფერხება.

PostgreSQL მეტრიკა არ არის ინფორმაციული ოპერაციული სისტემის პარამეტრების გარეშე. მაგრამ Zabbix Agent 2-მა უკვე იცის, როგორ შეაგროვოს ოპერაციული სისტემის პარამეტრები, ამიტომ სრული სურათის მისაღებად, ჩვენ უბრალოდ ვუკავშირდებით საჭირო შაბლონებს ჰოსტს.

დამმუშავებელი

დამმუშავებელი არის მოდულის მთავარი ერთეული, რომელშიც თავად მოთხოვნა სრულდება და რომელიც საშუალებას გაძლევთ მიიღოთ მეტრიკა.

მარტივი მეტრიკის მისაღებად:

1. შექმენით ფაილი ახალი მეტრიკის მისაღებად:

zabbix/src/go/plugins/postgres/handler_uptime.go

1. ჩვენ ვაკავშირებთ პაკეტს და ვაზუსტებთ მეტრიკის უნიკალურ კლავიშს (გასაღებს):

1. ჩვენ ვქმნით დამმუშავებელს (დამმუშავებელს) მოთხოვნით, ანუ ვიწყებთ ცვლადს, რომელიც შეიცავს შედეგს:

1. ჩვენ ვასრულებთ მოთხოვნას:

აუცილებელია შეცდომებზე მოთხოვნის შემოწმება, რის შემდეგაც შედეგს აიღებს Zabbix Agent 2 პროცესი.

1. დაარეგისტრირეთ ახალი მეტრიკული გასაღები:

მეტრიკის დარეგისტრირების შემდეგ, თქვენ შეგიძლიათ აღადგინოთ აგენტი ახალი მეტრიკით.

მოდული ხელმისაწვდომია Zabbix 5.0-დან დაწყებული ვებსაიტზე https://www.zabbix.com/download. Zabbix-ის ამ ვერსიაში, პარამეტრები დაყენებულია ცალკე ჰოსტისა და პორტის მეშვეობით. Zabbix 5.0.2-ში, რომელიც მალე გამოვა, კავშირის პარამეტრები შეფუთული იქნება ერთ URI-ში.

დიდი მადლობა!

სასარგებლო ბმულები

GitHub Mamonsu

მამონსუს დოკუმენტაცია

Zabbix Git

წყარო: www.habr.com