Практика
21 июня 2023, 14:36 1652 просмотра

EFSOL DevOps реализовали проект по стабилизации нагруженного кластера PostgreSQL

EFSOL. Системная интеграция. Консалтинг

DevOps-инженеры EFSOL произвели разбор и установили следующее: в момент прерывания работы в сетевой подсистеме ВМ, происходило переключение PostgreSQL с мастера на реплику, а Patroni не мог самостоятельно восстановить целостность кластера, ссылаясь на неполный файл транзакций. Происходило это вследствие недостаточного количества WAL-файлов — реплика не успевала получить необходимые разностные транзакции.

Требовалось внести изменения в конфигурационный файл postgresql.conf, используемый Patroni, кратно увеличив параметр wal_keep_size. В процессе работ выяснилось, что используемый кластер ETCD был в неисправном состоянии, он был исправлен.

Для решение проблемы распределения нагрузки на PostgreSQL, было принято решение разделить кластер PostgreSQL на два. Это было обусловлено спецификой данных, т.к. большую часть нагрузки генерировал один пользователь (условно), у которого были отдельные данные.

В результате проекта, работа кластера PostgreSQL стабилизирована. По данным мониторинга аномалий после изменения конфигурации не обнаружено. Нагрузка кластера PostgreSQL распределена - нагруженный кластер PostgreSQL разделен на два разных кластера.

Нужна помощь в решении IT-задач? Обращайтесь!

Статья относится к тематикам: Практика
Поделиться публикацией:
Подписывайтесь на наши новостные рассылки, а также на каналы  Telegram , Vkontakte , Дзен чтобы первым быть в курсе главных новостей Retail.ru.
Добавьте "Retail.ru" в свои источники в Яндекс.Новости
Загрузка
EFSOL DevOps реализовали проект по стабилизации нагруженного кластера PostgreSQL

DevOps-инженеры EFSOL произвели разбор и установили следующее: в момент прерывания работы в сетевой подсистеме ВМ, происходило переключение PostgreSQL с мастера на реплику, а Patroni не мог самостоятельно восстановить целостность кластера, ссылаясь на неполный файл транзакций. Происходило это вследствие недостаточного количества WAL-файлов — реплика не успевала получить необходимые разностные транзакции.

Требовалось внести изменения в конфигурационный файл postgresql.conf, используемый Patroni, кратно увеличив параметр wal_keep_size. В процессе работ выяснилось, что используемый кластер ETCD был в неисправном состоянии, он был исправлен.

Для решение проблемы распределения нагрузки на PostgreSQL, было принято решение разделить кластер PostgreSQL на два. Это было обусловлено спецификой данных, т.к. большую часть нагрузки генерировал один пользователь (условно), у которого были отдельные данные.

В результате проекта, работа кластера PostgreSQL стабилизирована. По данным мониторинга аномалий после изменения конфигурации не обнаружено. Нагрузка кластера PostgreSQL распределена - нагруженный кластер PostgreSQL разделен на два разных кластера.

Нужна помощь в решении IT-задач? Обращайтесь!

it, автоматизация, развитие, эффективностьEFSOL DevOps реализовали проект по стабилизации нагруженного кластера PostgreSQL
https://www.retail.ru/local/templates/retail/images/logo/login-retail-big.png 67243
https://www.retail.ru/local/templates/retail/images/logo/login-retail-big.png 67243
Retail.ru https://www.retail.ru
https://www.retail.ru/rbc/pressreleases/efsol-devops-realizovali-proekt-po-stabilizatsii-nagruzhennogo-klastera-postgresql/2023-06-21


public-4028a98f6b2d809a016b646957040052