Исследование нагрузки на ELK stack и тюнинг Logstash

Архитектура Начнём с рассказа про архитектуру ELK ELK используется для хранения логов сервисов и логов самого кластера Kubernetes. Кластер ELK состоит из трех мастер нод, четырех нод с данными: по две ноды на ssd и sata дисках, две ноды Logstash для препроцессинга логов и Filebeats в кластере Kubernetes, развернутые daemonset'ом и отправляющие логи в Logstash. По две ноды Logstash и по две ноды ssd и sata дисков использованы для обеспечения отказоустойчивости. Начало проблем Точкой отсчета можно считать триггеры…