🥇Какво ново в Zabbix 5.0

В средата на май излезе версия Zabbix 5.0 и организирахме серия от онлайн срещи на различни езици, с цел да продемонстрираме на общността всички промени и нововъведения. Предлагаме ви да се запознаете с доклада на изпълнителния директор и създател на Zabbix Алексей Владышев, в който той подробно обяснява какво ново има в Zabbix 5.0.

Zabbix 4.2 и Zabbix 4.4

Нека започнем с промените, които се появиха в версия Zabbix 4.0, поради използването на LTS-версии.
В версия Zabbix 4.2, която излезе през април 2019 година, се появиха следните възможности:

Височестотен мониторинг чрез тротлинг, който осигурява мащабируемост и повишаване на NVPS, което означава по-бързо откриване на проблеми и насочване на известия без голямо натоварване на Zabbix.
Събиране на данни с помощта на HTTP агент.
Подкрепа за събиране на данни от Prometheus Pro.
Предобработката поддържа валидация и JavaScript, който позволява трансформиране на всякакви събирани данни.
Предобработка на страната на прокси, която осигурява по-ефективно мащабиране с помощта на прокси.
Подобрено управление на тагове — мета информация на ниво събития и проблеми, с която е удобно да се работи, тъй като таговете се поддържат както на ниво шаблони, така и на ниво мрежови възли.

През септември миналата година излезе версия Zabbix 4.4, която предлагаше следните възможности:

Нов Zabbix агент.
Подкрепа за Webhook за известия и уведомления, което позволява интеграция с външни системи.
Подкрепа за TimescaleDB.
Вградената база знания за метрики и тригери стана видима за потребителите на Zabbix. Например, потребителите могат да използват описанието на елементите данни и тригерите в Monitoring > Latest data.
Нов стандарт за шаблони.

Zabbix 5.0

Днес ще говорим за LTS изданието Zabbix 5.0, което ще бъде поддържано в продължение на 5 години. Поддръжката на версия 4.4 спира след един месец. LTS изданието Zabbix 3.0 ще бъде поддържано още 3.5 години.

Zabbix осигурява мониторинг на много неща, списъкът на които може да бъде уточнен на страницата http://www.zabbix.com/integrations, където са представени шаблони за мониторинг и плъгини, включително за новия агент.

Достъпни шаблони за мониторинг и интеграция

Освен това, съществуват възможности за интеграция с различни системи, включително системи за тикети, ITSM системи и системи за доставка на съобщения чрез Webhook.

Възможности за интеграция

В Zabbix 5.0 е разширена вградена поддръжка за интеграция с различни тикет системи, както и с системи за нотификации:

Интеграция с различни системи

Разширен е списъкът с вградени шаблони за мониторинг на приложения и устройства:

Вградени шаблони за мониторинг на приложения и устройства

Всички актуализации са налични за изтегляне в Git хранилище.

Всеки потребител или разработчик може да участва в Zabbix с готови разработки — шаблони или плъгини, чрез опростена процедура:

Подписване на Zabbix Contributory Agreement (ZCA) на https://www.zabbix.com/developers.
Разположение на Pull Request на https://git.zabbix.com.
Разглеждане на заявката от екипа на разработчиците. Ако плъгинът или шаблонът отговаря на стандартите на Zabbix, той се включва в продукта и работата на такъв разработчик ще бъде официално поддържана от екипа на Zabbix.

Zabbix е софтуер с отворен код, който е на разположение за преглед, изучаване и промяна. Потребителят има възможност да използва продукта свободно, да участва в развитието на програмата или да използва кода за свои нови програми. От друга страна, екипът на Zabbix прави всичко възможно, за да се улесни инсталирането на Zabbix на различни платформи.

Разработчиците на Zabbix предлагат пакети за почти всички най-популярни дистрибуции и различни платформи за виртуализация. Освен това, Zabbix може да бъде инсталиран в публичното облако с едно щракване. Zabbix е наличен и на платформи Red Hat Openshift или OpenStack.

Пакети на Zabbix за дистрибуции и платформи

Поддръжка на Zabbix Agent 2 за Windows и Linux

Нови Zabbix Agent 2 е едно от най-добрите решения на пазара.

Предлага структура, основана на плъгини, и поддържа скриптове за събиране на данни, които могат да работят часове.
Поддържа паралелни активни проверки, постоянни връзки с външни системи, което е полезно, например, за ефективен мониторинг на бази данни.
Поддържа тригери и събития, което е важно за мониторинг, например, на MQTT устройства.
Новата версия на агента се инсталира лесно (тъй като новият агент поддържа всички предишни функции).

Освен това, новият агент в Zabbix 5.0 предлага поддръжка на постоянно съхранение на данни. Преди непратената информация се съхраняваше само в буферната памет на агента, а в новата версия е достъпна настройка за съхранение на такава информация на диска.

Постоянно съхранение на данни

Това е важно при мониторинг на критични системи и нестабилни комуникации, тъй като голямо количество важни данни се запазва до изпращането им на Zabbix сървъра. Опцията е полезна и за спътникови връзки, които могат да са недостъпни за дълго време.
ВАЖНО! В Zabbix 5.0 е запазена поддръжката на Zabbix Agent 1.

Промени в системата за сигурност в Zabbix 5.0

1. В новата версия се поддържа HTTP-прокси за webhook, който позволява да се осъществяват връзки от Zabbix сървера с външни системи за известия по-сигурен и управляван начин.

Ако е необходима интеграция на Zabbix сървера в локална мрежа с външна система, например JIRA в облака, може да се поддържа връзка чрез HTTP-прокси, което подобрява контрола и надеждността на връзката.

2. И за стария, и за новия агент е предвидена възможност за избор на точно кои проверки да бъдат достъпни на определен агент. Например, може да се ограничи броят на проверките, практически създавайки бели и черни списъци, да се определят поддържаните ключове.

Бел списък за проверки, свързани с MySQL
```
AllowKey=mysql[*] 
DenyKey=*
```
Черен списък за забрана на всички shell скриптове
```
DenyKey=system.run[*]
```
Черен списък за забрана на достъп до /etc/password
```
DenyKey=vfs.file.contents[/etc/passwd,*]
```

3. Възможен е избор на алгоритми за шифриране за всички компоненти на Zabbix, за да се избегне използването на небезопасни шифри за TLS-връзки. Това е важно за мониторинг на среди, в които се прилагат определени стандарти за сигурност.

Избор на алгоритми за шифриране за TLS-връзки

4. В Zabbix 5.0 бе добавена поддръжка на шифровани връзки с базата данни. В момента е налична само шифрованата връзка с PostgreSQL и MySQL.

Шифровани връзки с базата данни

5. Zabbix 5.0 премина от MD5 на SHA256 за съхранение на хешовете на паролите на потребителите в базата данни, тъй като в момента това е най-сигурният алгоритъм.

6. Zabbix 5.0 поддържа секретни потребителски макроси за съхранение на всякаква конфиденциална информация, като пароли и API токени, до които не получават достъп крайните потребители.

Тайни макроси

7. Всички връзки на Zabbix с външни системи и вътрешни връзки с агенти са безопасни. Поддържа се криптиране с помощта на TLS сертификати или с предварително публикуван ключ (pre-shared key encryption) за свързване с агенти и прокси, или чрез HTTPS. Сигурността от страна на агентите може да бъде увеличена чрез белите и черните списъци. Интерфейсът работи чрез HTTPS.

Безопасни връзки

8. Поддръжка на SAML за осигуряване на единна точка на удостоверяване при надежден доставчик на идентификационни услуги, така че потребителските удостоверителни данни да не напуснат границите на защитната стена.

SAML удостоверяване

Поддръжката на SAML позволява интегриране на Zabbix с различни локални и облачни доставчици на идентификационни услуги, като Microsoft ADFS, OpenAM, SecurAuth, Okta, Auth0, както и Azure, AWS или Google Cloud Platform.

Удобство при използване на Zabbix 5.0

1. Потребителски интерфейс, оптимизиран за широки екрани. Преместихме менюто от горната част, където винаги липсва място, в лявата част на екрана. Менюто все още се показва в пълен, минимален и скрит режим.

Интерфейс, оптимизиран за широк екран

2. Копиране на джаджи от панели позволява много бързо създаване на нови ПАНЕЛИ. За целта в ПАНЕЛИ трябва да изберете необходимата джаджа, да натиснете Copy

Копиране на джаджа

и да поставите джаджа в желания панел.

Поставяне на копираната джаджа

3. Експорт на графики. За да копирате графика и да я изпратите, например, по електронна поща, можете да получите график в PNG формат, като изберете необходимата джаджа и натиснете Изтегляне на изображение.

Експорт на графики

4. Филтриране по тагове: Проблеми по тежест и Проблемни хостове. Появи се възможността, например, да съберете в един дата център данни за всички проблеми, свързани с един мрежов възел.

Филтриране по тагове

5. Поддръжка на модули за разширяване на интерфейса на Zabbix. За да инсталирате независим модул, трябва да го копирате в определена директория. Модулите позволяват разширяване на съществуващата функционалност на интерфейса, създаване на нови страници, променяне на структурата на менюто, например, добавяне на нови елементи.

Модулът може да бъде написан и интегриран от всеки потребител. За целта модулът се копира в папката modules, след което става видим за интерфейса, където може да бъде включен или изключен.

Добавяне на нов модул

6. Простота при навигацията по ресурсите, свързани с узлите на мрежата. В Мониторинг > Хостове се показва списък с устройства, които Zabbix мониторира: узли на мрежата, услуги, мрежови устройства и т.н. Освен това е налична бърза навигация към екрани, графики и проблеми на конкретни устройства.

Премахнахме разделите Мониторинг > Графики и Мониторинг > Уебсайтове, и цялата навигация се извършва чрез Мониторинг > Хостове. Информацията, която се показва, може да се филтрира, включително по тагове, което позволява показването на изключени устройства

Навигация по ресурсите, свързани с узлите на мрежата

Например, можете да изберете устройства, които принадлежат на услугите за крайни потребители, като изберете ‘Service’, а също така да зададете нивото на важност на тези проблеми.

Възможности за филтриране

7. Нова операция за предварителна обработка — ‘Замяна‘ позволява извършването на няколко полезни действия, които преди бяха възможни само с помощта на регулярни изрази, достатъчно сложни за много потребители.
Замяна позволява фактически да замените една строка или символ с други, което позволява лесно преобразуване на данни, получени в текстов формат, в числово представяне.

Оператор Замяна

8. Оператор JSONPath, който позволява извличането на имената на атрибутите в удобна форма

Оператор за JSONPath

9. Показване на имейл съобщения от Zabbix. В предишните версии всички имейл съобщения от Zabbix в папката Входящи бяха показвани в списък. Започвайки от Zabbix 5.0, съобщенията ще бъдат групирани по проблеми.

Групиране на имейл съобщения от Zabbix

10. Поддръжка на потребителски макроси за IPMI за име на потребител и парола. Ако за името на потребителя и паролата се използват секретни макроси, достъпът до тяхната стойност ще бъде затворен.

Поддръжка на потребителски макроси

11. Масово изменение на потребителските макроси за узлите на мрежата. В новата версия можете да отворите списък с шаблони, да изберете списък с узли на мрежата и да добавяте макроси или да променяте стойностите на съществуващите макроси,

Добавяне и изменение на потребителски макроси

и също така да премахват определени или всички макроси от избраните шаблони за мрежови възли.

Премахване на отделни или всички потребителски макроси

12. Контрол на формата на съобщенията на ниво метод на известяване. В Media типове появи се раздел Media шаблони с шаблоните на съобщенията.

Шаблони на методите на известяване

За различни типове съобщения могат да се определят различни шаблони.

Определяне на шаблон за тип съобщения

В предишните версии трябваше да управлявате тези съобщения на ниво действия, определяйки съобщения и тема по подразбиране.

Управление на шаблоните на ниво действия

В новата версия всичко може да се определи на глобално ниво, а на ниво съобщения — да се презапишат глобалните настройки.

Управление на шаблони на глобално ниво

За повечето потребители е достатъчно да определят форматите на шаблоните на ниво метод на известяване. Освен това, след импортиране на нов метод на известяване, всички съответстващи формати на шаблони вече са част от него.

13. По-широко приложение на JavaScript. JavaScript се използва за скриптове за предварителна обработка, за Webhook и т.н. В командния ред, работа с JavaScript не е лесна.
В Zabbix 5.0 се използва нова утилита — zabbix_js, стартираща JavaScript, който приема данни, обработва ги и генерира изходни стойности.

Утилита zabbix_js

Примери за използване на утилита zabbix_js

14. Поддръжка на текстови операции с тригерни изрази позволява проверка на версиите на инсталираните компоненти, сравняване на стойности с определени константи, при което константата може да бъде потребителски макрос,

{host:zabbix.version.last()}="5.0.0"
{host:zabbix.version.last()}="{$ZABBIX.VERSION}

сравняване на последната стойност с предишната, например, когато става въпрос за текстови данни,

{host:text.last()} {host.text.prev()}

или

{host:text.last(#1)} {host.text.prev(#2)}

или сравняване на текстови стойности на различни метрики.

{hostA:textA.last()}={hostB:textB.last()}

15. Автоматизация и откритие.

Налични са нови проверки JMX за извличане и откритие на списък с JMX броячи, което е много полезно, например, за мониторинг на Java приложения, а също и за автоматизация на създаването на мониторингови елементи, метрики, тригери и графики.
```
jmx.get[]
```
и
```
jmx.discovery[]
```
Проверки JMX
В новата версия се появи ключ за мониторинг на производителността на Windows, който се поддържа от стари и нови агенти на руски и английски езици и позволява, например, да се открива броят на процесорите, файловите системи, услугите и т.н.

Мониторинг на производителността на Windows с помощта на ключа perf_counter
ODBC мониторингът стана много по-лесен. По-рано всички параметри за ODBC мониторинг трябваше да бъдат описани във външен файл /etc/odbc.ini, до който нямаше достъп от интерфейса на Zabbix. В новата версия почти всичките параметри могат да бъдат част от ключа на метриката.

Ключ на метриката с описание на параметрите
В новата версия можете да зададете името на сървъра и порта на ниво метрика, а името и паролата за достъп — с помощта на секретни макроси за сигурност.

Използване на секретни макроси
При използване на протокола IPMI за мониторинг на оборудването се появи възможност за създаване на по-прости шаблони за автоматизация с помощта на ipmi.get.

ipmi.get

16. Тестване на елементите от данните от интерфейса. В Zabbix 5.0 се появи възможност за тестване на някои елементи от данните и, което е още по-важно, на шаблоните за елементи от данните от интерфейса.

Тестване на елементите от данните

Всички възникващи проблеми се показват в интерфейса.

Показване на проблемите в интерфейса

Аналогичен алгоритъм се използва за шаблоните на елементите от данните. Освен това, ако някой елемент от данните не се поддържа, за да разберете причината за повредата, просто натиснете Тест.

17. Тестване на начините за уведомяване, което се появи в Zabbix 4.4, остава, което е важно при интеграцията на Zabbix с други системи, например, системи за тикети.

Тестване на начините за уведомяване

18. Поддръжка на потребителски макроси за шаблони на елементи от данните. За определяне на стойностите на потребителските макроси могат да се използват LLD макроси.

Използване на LLD макроси за определяне на стойностите на потребителските макроси

19. Поддръжка на данни Float64, които са необходими, основно, за мониторинг на изключително големи стойности, в Zabbix е необходима за поддръжка на данни получавани от агентите на Prometheus.
При инсталиране на Zabbix 5.0 автоматичната миграция на данни към стандарт Float64 не се извършва. Потребителят запазва възможността да използва старите типове данни. Скриптовете за миграция към Float64 се стартират ръчно и променят типовете данни в историческите таблици. Автоматичната замяна не се използва, тъй като отнема много време.

20. Подобряване на мащабируемостта на Zabbix 5.0: оптимизация на интерфейса и отстраняване на "узки места"

Премахнати са падащите списъци, например, за избор на мрежови узли, тъй като тази функция не е мащабируема.
Появиха се "вградени" ограничения за размерите на таблиците Общ преглед.
Появиха се нови възможности в Monitoring > Hosts > Graphs.
Появи се функция за странициране (Monitoring > Hosts > Web) където я нямаше.

21. Подобрена компресия
Компресията в Zabbix е базирана на разширение за PostgreSQL — TimescaleDB (от Zabbix 4.4). TimescaleDB осигурява автоматично секциониране на базата данни и увеличава нейната производителност, тъй като производителността на TimescaleDB в действителност не зависи от размера на базата данни.

В Zabbix 5.0 в Administration > General > Housekeeping може да се настрои, например, компресия на данни, по-стари от 7 дни. Това значително намалява необходимото дисково пространство (почти десет пъти, според потребителски данни), което подобрява икономията на дисково пространство и увеличава производителността.

Компресия с помощта на TimescaleDB

22. Настройка на SNMP на ниво интерфейс. В Zabbix 5.0 вместо три типа елементи данни се използва само един — SNMP агент. Всички атрибути на SNMP са преместени на ниво интерфейс на мрежовите узли, което позволява опростяване на шаблоните, превключването между версиите на SNMP и т.н.

Настройка на SNMP на ниво интерфейс

23. Зависимост на мониторинга на наличността на мрежовите узли от наличността на прокси позволява визуализиране на проблема с наличността на прокси като приоритетен в случай, че мрежовите узли са недостъпни при мониторинг с тригер с функция nodata:

{HostA:item.nodata(1m)}=1

Наличността на мрежовите узли се определя от наличността на прокси

Функция nodata по подразбиране отчита наличността на прокси. За по-строга проверка, която не взема предвид наличността на прокси, се използва вторият параметър — strict:

{HostA:item.nodata(1m,strict)}=1

24. Управление на правилата за нискоуредно откритие. В Zabbix 5.0 се появи LLD-филтър, който позволява преглед на неподдържаните правила за откриване.

LLD-филтър

25. Възможност за отменяне на потвърждението на проблема (unacknowledge) позволява коригиране на грешки и е полезна при създаване на работни потоци, зависими от потвърждение на проблема.

Отменяне на потвърждението на проблема

26. Промяна на правилата за нискоуровнево откриване —възможност за добавяне на изключения при откриване на обекти в резултат на мониторинг на файлови системи, която позволява при нискоуровневото откриване да се създават или не създават определени обекти, тригери, елементи от данни и т.н., да се променя важността на проблемите, да се добавят тагове за определени обекти, да се изключват обекти, например, времеви файлови системи, от търсенето, да се променя интервалът за обновление на данните и т.н.

Изключване на времевите файлови системи от нискоуровневото откриване

Например, можете да промените нивото на приоритет на тригерите за откритите файлови системи Oracle, като оставите нивото на приоритет на тригерите за другите файлови системи на същото ниво.

Промяна на нивото на приоритет на тригерите за отделни файлови системи

27. Нови макроси в Zabbix 5.0 позволяват да се повиши качеството на мониторинга.

Нови макроси в Zabbix 5.0

28. Други нововъведения в Zabbix 5.0:

Подобрения в Zabbix 5.0

29. Прекратяване на поддръжката

Неподдържана функционалност

Заключение

Обновяването до Zabbix 5.0 е много просто! Инсталирайте и стартирайте новите бинарни файлове за сървъра и frontend файловете, и сървърът автоматично ще обнови вашата база данни.
Информация за процедурата по обновяване на Zabbix е публикувана на адрес:
https://www.zabbix.com/documentation/current/manual/installation/upgrade_notes_500

ВАЖНО!

Обновяване на историческите данни до формат Float64 не е задължително.
Данните на TimescaleDB са само за четене.
Минимална изисквана версия PHP7.2.
DB2 не се поддържа като backend за Zabbix сървера

(!) Видеа и слайдове от презентации на Алексея Владышева и други говорители на Zabbix Meetup Online (Руски) могат да се видят тук.

Източник: habr.com