Когда логов действительно много, вам больше не нужно искать и сопоставлять их в разных системах. Собрать в общем хранилище и проанализировать логи из различных источников (файлы, базы данных и т.п.) в реальном времени поможет Digital Q.ELK.
Обработка большого объема логов из множества различных источников в реальном времени – это всегда непростая задача. Однако Digital Q.ELK упрощает этот процесс, предлагая удобные инструменты для диагностики проблем в режиме реального времени.
Преимущества Digital Q.ELK для клиентов
Digital Q.ELK обеспечивает:
- поддержку множества источников логов;
- правильный порядок событий логов для анализа;
- гибкий поиск по логам, включая нечеткий поиск;
- удобный веб-интерфейс для просмотра и анализа логов;
- сквозную трассировку операций из разных систем в одном графическом интерфейсе.
Некоторые цифры
Цифровые показатели эффективности Digital Q.ELK впечатляют:
- размер базы данных до 10 ТБ в крупных проектах;
- количество записей логов достигает 30 миллиардов;
- при нагрузочном тестировании в дата-центре Монпелье 300 экземпляров микросервисов на восьми нодах одновременно генерируют логи в один экземпляр хранилища без потерь производительности.
Компоненты платформы Digital Q.ELK
Хранилище данных логов (QElasticSearch)
Масштабируемое NoSQL-хранилище данных произвольной сложности и структуры. Обеспечивает автоматическую индексацию объектов, гибкость поисковых фильтров и поддержку восточных языков.
Сбор данных логов (QFluentBit)
Инструмент для сбора, трансформации и хранения данных из различных источников в реальном времени. Поддерживает около 30 форматов исходных данных и легко расширяется.
Визуализация данных логов (QKibana)
Инструмент для визуализации и анализа данных из QElasticSearch. Предлагает разнообразные типы визуализаций, приборные доски, фильтры и плагины для удобной работы с информацией.
Сбор и визуализация трассировки (QZipkin)
Система распределённой трассировки, позволяющая отслеживать выполнение операций в распределённых сервисах. Помогает выявлять ошибки и оптимизировать производительность системы.
