Наши грабли — залог вашего успеха || Максим Огрызков, старший системный администратор

Максим расскажет о транспорте доставки логов из разных систем и окружений, и том, как с этим связан Apache Kafka 1:17 О чем будет доклад: кластер логов 1:43 Как логи попадают в кластер? 3:50 Почему мы выбрали Apache Kafka 5:02 Rsyslog: преимущества использования 9:00 Где хранить логи из разных ДЦ? 12:08 Что делать, если объем данных слишком большой? 14:00 Обновление кластера. 20:30 Наши грабли и пути решения 22:35 Translog 24:25 Bulk request 26:28 Opendistro-perfomance-analyzer 28:28 Index Shrink 29:49 Librdkafka 31:37 Итоги: как выглядит наш кластер сейчас