Об этом проекте

Open-Source Log File & Bot Traffic Analyzer — это клиентский инструмент, разработанный для технических SEO-специалистов, разработчиков и системных администраторов для аудита логов доступа к серверу без загрузки конфиденциальных данных на сторонний сервер. Он локально обрабатывает логи в форматах JSON, JSONL и NDJSON прямо в браузере, поддерживая форматы Cloudflare, Nginx, Apache, AWS ALB и Varnish. Ключевые возможности включают: - Классификация ботов: идентификация более 50 известных сигнатур поисковых систем, AI-скреперов (например, GPTBot, ClaudeBot) и инструментов мониторинга. - Анализ сканирования: обнаружение ловушек для краулеров (crawl traps), циклов пагинации и путей к директориям с низкой ценностью. - Оценка затрат: расчет приблизительных накладных расходов на исходящий трафик инфраструктуры на основе моделей ценообразования CDN (например, AWS CloudFront). - Обнаружение угроз безопасности: маркировка автоматизированных попыток обхода путей (path traversal) и паттернов сканирования уязвимостей. - Генерация правил Edge: создание готового синтаксиса для Cloudflare WAF, Fastly VCL и AWS WAF для блокировки или ограничения частоты запросов для конкретных user-agents. Инструмент работает полностью автономно после первоначальной загрузки, гарантируя, что данные логов никогда не покидают машину пользователя.