The OpenNET Project / Index page

[ новости /+++ | форум | теги | ]



Вариант для распечатки  
Пред. тема | След. тема 
Форум Оптимизация и Промышленные системы (Увеличение масштабируемости)
Режим отображения отдельной подветви беседы [ Отслеживать ]

Оглавление

Zabbix на PostgreSQL, Andrey Mitrofanov (?), 29-Апр-13, (0) [смотреть все] +1

Сообщения [Сортировка по времени | RSS]


1. "Zabbix на PostgreSQL -- доп., часть 1"  +/
Сообщение от Andrey Mitrofanov (?), 29-Апр-13, 12:41 
> === Аноним, 11:59 , 26-Апр-13 (1) +4
> #>>> Интересно, если Заббикс на этот движок перенести - ему поможет?
> === alp, 12:22 , 26-Апр-13 (4) +2
> #>> Postgres ему точно поможет
> http://www.opennet.dev/cgi-bin/openforum/vsluhboard.cgi?az=sh...
>>> Postgres ему точно поможет
>> Не-а. Моему Zabbix-у на Pg, "сурово" загруженному до того по диску/SQL (не
>> считая не-масштабируемости самого Z.), помогло разделение напополам на два сервера -
>> половина~ хостов туда, половина сюда.

----

= Моё "Не-а"

...относилось к флейм-вбросу пользователя alp Mysql vs PgSQL и моим _впечатлениям про немасштабируемость Zabbix-а. Мой подопечный Zabbix рос-рос, и "выросла такая большая...".

= Re: "помогло разделение напополам"

* Не только. Было ещё заметно помогшее изменение: добавление ОЗУ: 32Гб -> 96Гб, при размере базы на диске в районе 48-49Гб. То есть грубо - база поместилась в кеше. Вероятно, паттерн работы с диском поменялся на "преимущественно запись", каковым он сейчас является. Но во время того изменения я не снимал параметры дискового в/в.

* Параметры разделения:

zabbix "performance" (~значения-айтемы в секунду) до разделения ~770, после разделения два сервера, ~320 и ~450. (айтемов ~70-72K - всего (unsupported - 7.9-8.5К, not-monitored -- оно и само не умеет отдавать, в виде performance, разве что), после разделения ещё не числил базы от "второй половины", только Not-monitored поставил на хосты из "не той" половины.

=== В&О #1

= sauron, 13:57 , 26-Апр-13 (9) +3
> PostgeSQL хоть потюненый был?

Был... Наверное. shmem в ядре и конфиге pg добавлял, немного покрутил bg-writer-ы, когда занялся переписыванием housekeeper-а. Но особо боевой сервер не менял, а сделать подобную нагрузку на стенде -- даже и не пытался.

= anonymous, 16:08 , 26-Апр-13, (36)

>> Ну, housekeeper по-переписывал -- чтоб он не забивал своим io более приоритетные
>> (для меня) основные процессы Z.
> Заббикс версии 1.8 или 2.+?

Сейчас 2.0. (~~ 1.8.10?.12 -> 1.8.16 -> 2.0.2 ..., сейчас 2.0.5 + "патчики")
HK "начал беспокоить" ещё на 1.8, на 2.0 я дошёл до "влезания вовнутрь"...

= AlexAT, 21:48 , 26-Апр-13, (66)
> А для статистики - не скажете число итемов/триггеров?

Сейчас "два сервера" выглядят примерно так:

Number of hosts (monitored/not monitored/templates)
   >>#1>>      1142     478 / 507 / 157
   >>#2>>      1147     382 / 610 / 155

Number of items (monitored/disabled/not supported)
   >>#1>>     30746   22938 / 498 / 7310
   >>#2>>     30714   29942 / 29 / 743

Number of triggers (enabled/disabled)[problem/unknown/ok]
   >>#1>>     14518   13880 / 638  [176 / 0 / 13704]
   >>#2>>      3377    3213 / 164  [44 / 0 / 3169]


> Просто интересно, насколько наша инсталляция крупная/мелкая.

Эммм. Зависит... , кого %) "принять за образцы". Сам ;) в непонятках. В т.ч., видимо, либо потому, что не публикуют[*PS], либо я ленив и zabbix.com не читаю.

PS: Пойду в бухгалтерию получать премию за разглашение чувствительной.

Ответить | Правка | Наверх | Cообщить модератору

6. "Zabbix на PostgreSQL -- доп., часть 1"  +/
Сообщение от Andrey Mitrofanov (?), 03-Май-18, 14:30 
>> Заббикс версии 1.8 или 2.+?
> Сейчас 2.0. (~~ 1.8.10?.12 -> 1.8.16 -> 2.0.2 ..., сейчас 2.0.5 +
> "патчики")
> HK "начал беспокоить" ещё на 1.8, на 2.0 я дошёл до "влезания
> вовнутрь"...

Сейчас Zabbix 3.0 LTS с "просроченным" PostgreSQL 9.1[.24lts2].

...переехал с el6 на el7 (для соболезнований по поводу systemd
   http://www.opennet.dev/openforum/vsluhforumID3/108006.html#88
   http://www.opennet.dev/openforum/vsluhforumID3/113337.html#149
уже поздно, но спасибо).

...также в "купились" новые серверы с "больше шпинделей" (было 4 стало 8) и памяти (96GB -> 128GB).

...обе половинки перевёз на 3.0 (одну с 2.0, вторую с 2.2).  Cамоделки в HK отвалились (портировать не стал -- а оно "и так" поехало) - ещё при переводе Zb на 2.2.

> = AlexAT, 21:48 , 26-Апр-13, (66)
>> А для статистики - не скажете число итемов/триггеров?
> Сейчас "два сервера" выглядят примерно так:

Number of hosts (monitored/not monitored/templates) 
  >>#1>>      2413    1764 /  176 / 473
  >>#2>>      1096     886 /   80 / 130

Number of items (monitored/disabled/not supported)
  >>#1>>     81917   79388 / 1492 / 1037
  >>#2>>    108362   97484 / 6530 / 4348

Number of triggers (enabled/disabled)[problem/unknown/ok]
  >>#1>>     49148   45963 / 3185 [ 170 / 45793]
  >>#2>>     11735   11154 /  581 [1001 / 10153]

NVPS, настоящий (по zabbix[wcache,values], avg/last month), ненастоящий
  (Required server performance по dashboard-у)
  >>#1>>     1.23k     913
  >>#2>>     1.55k    1829


>> Просто интересно, насколько наша инсталляция крупная/мелкая.

--
Обновил для Истории и очередной темы про "а какой мне сервер под Zabbix" -- http://www.opennet.dev/openforum/vsluhforumID1/97191.html#2

Ответить | Правка | Наверх | Cообщить модератору

7. "Zabbix на PostgreSQL -- доп., часть 1"  +1 +/
Сообщение от amonymous (?), 03-Май-18, 18:08 
> Обновил для Истории и очередной темы про "а какой мне сервер под
> Zabbix" -- https://www.opennet.dev/openforum/vsluhforumID1/97191.html#2

А у мну примерно так стало:

Number of hosts (enabled/disabled/templates)    8559    7208 / 1254 / 97
Number of items (enabled/disabled/not supported)    319510    233701 / 79100 / 6709
Number of triggers (enabled/disabled [problem/ok])    162098    96630 / 65468 [765 / 95865]
Required server performance, new values per second    1435.63

Сервер один, 2xX5650, платформа - XenServer, виртуалке отдано все 12 ядер и 36 гигов из 48 доступных.
MySQL-сервер с TokuDB под history и партишнинг там же.

Ответить | Правка | Наверх | Cообщить модератору

8. "Zabbix на PostgreSQL -- доп., часть 1"  +/
Сообщение от amonymous (?), 03-Май-18, 18:22 
По диску - четыре мамонтовых SAS 300Gb в RAID10
Ответить | Правка | Наверх | Cообщить модератору

Архив | Удалить

Рекомендовать для помещения в FAQ | Индекс форумов | Темы | Пред. тема | След. тема




Партнёры:
PostgresPro
Inferno Solutions
Hosting by Hoster.ru
Хостинг:

Закладки на сайте
Проследить за страницей
Created 1996-2024 by Maxim Chirkov
Добавить, Поддержать, Вебмастеру