Screaming Frog выпустила Log File Analyser 7.0

Screaming Frog выпустила версию 7.0 своего инструмента Log File Analyser. Обновление включает восемь крупных нововведений и ряд улучшений, направленных на более детальный анализ поведения ботов на сайтах. Разработчики сосредоточились на расширении возможностей верификации и группировки пользовательских агентов, а также на улучшении экспорта данных.

Одним из ключевых изменений стала поддержка верификации ИИ-ботов. Теперь инструмент позволяет подтвердить подлинность бота, обращающегося к сайту, и выявить случаи подмены идентификатора. Верификация доступна как в процессе загрузки лог-файлов, так и через отдельный пункт меню после завершения импорта данных.

В версии 7.0 появилась группировка пользовательских агентов, позволяющая фильтровать ботов по категориям, например все поисковые боты или все ИИ-боты. Также добавлена возможность настраиваемой верификации для новых агентов с указанием IP-диапазонов, ASN или обратного DNS. Пользователи могут обновлять параметры верификации без ожидания новой версии программы.

В разных разделах появились графики Time Series, где можно сравнивать события, коды ответа, трафик и время отклика. Для Linux добавили пакеты Arm и обновили приложение до Java 25. Ранее сообщалось, что Anthropic представила три вида поисковых роботов, поэтому идентификация краулеров становится более сложной задачей.

Обновление инструмента актуально для специалистов, занимающихся продвижением сайтов и использующих искусственный интеллект для анализа поискового трафика. Расширенные возможности верификации ботов и детализированные отчёты помогают точнее оценивать активность краулеров и принимать обоснованные решения по технической оптимизации ресурса.