Ура! У нас есть накапливаемая БД в логами! Дальше только анализ логов и разбор полетов… Графики логов Ну вот не знаю что с этим делать и как дальше жить. Из готового особо ничего такого не обнаружил (может все же плохо искал). Из того что есть — это графики логов, т.е. пишем специальный запрос и смотрим […]
Архивы за месяц Декабрь, 2022
Анализ логов
12 декабря, 2022 
admin 
Опубликовано в рубрике Программирование, Серверы 
Метки: web-сервер, БД, Логи, Сервис 
Комментариев нет »Хранение логов в БД
8 декабря, 2022 admin После анализа логов их необходимо куда-то структурированно сохранить (какую-то базу). Для хранения логов в БД для начала нужно выбрать в какую СУБД. При этом существует, опять же, целая масса вариантов. Немного поразмыслив я решил использовать ClickHouse. Судя по обзорам достаточно быстрая (не зря же yandex ее создавали как раз для хранения большого объема и обработки […]
Обработка логов
5 декабря, 2022 admin Логи, собственно, уже собираем. Следующая задача их нужно каким-то образом обработать логи: подготовить и отправить в базу данных. Чем обрабатывать? В принципе вариантов на эту тему масса. Первый вариант — использовать готовое решение, второй вариант — писать свое. Собственно сложность состоит в том, что хоть и логи +/- похожи друг на друга, но все же […]
Передача логов на один сервер
1 декабря, 2022 admin Вот не хочется устанавливать ворох ПО на серверы для сбора логов в одном месте. Хочется использовать что-то уже предустановленное. Будем организовывать передачу логов на один сервер (может на 2, а может и на 3 — все зависит от нагрузок на систему и передаваемого трафика). В данной статье речь пойдет об операционных системах Debian и CentOS […]