Модуль Список ботов позволяет настраивать доступ как для известных DDoS-Guard групп легитимных ботов (организаций), так и для отдельных ботов внутри группы.
Действия
Для каждого бота можно выбрать одно из трех действий:
- Пропускать — запросы от бота будут пропущены к целевому серверу. Работает аналогично добавлению IP-адреса в белый список. Подробнее на схеме фильтрации L7
- Фильтровать — запросы от бота будут проходить через каскад фильтров L7 и, если система сочтет их подозрительными, могут быть подвергнуты проверке с помощью JS challenge и CAPTCHA и заблокированы
- Блокировать — запросы от бота будут блокироваться
По умолчанию для всех групп ботов выбрано действие пропускать — так защита от DDoS не мешает работе поисковых и других полезных ботов.
Действие можно назначить для всей группы ботов сразу — выбранное действие заменит все настройки для ботов внутри группы
Используйте строку «Остальные боты…» внутри каждой группы, чтобы установить настройки для всех других ботов, принадлежащих этой организации. При добавлении в группу новых ботов к ним будет автоматически применяться выбранное действие.
Например, вы назначили действия для всех ботов Google и в строке «Остальные боты Google» выбрали «Пропускать». Если в группе Google появится новый бот, для него будет установлено действие «Пропускать»
Категории
Для удобства боты классифицированы по категориям:
- «Поисковые системы» — боты-краулеры и другие боты, которые обеспечивают работу поисковиков;
- «Кибербезопасность» — боты, задействованные в проверке безопасности сайта, например сканеры уязвимостей;
- «Искуственный интеллект» — боты-скрейперы, которые собирают контент для обучения ИИ;
- «Реклама» — боты для индексации страниц в интересах рекламных сетей;
- «Предпросмотр веб-страниц» — боты, которые генерируют картинки-превью страницы, например при отправке ссылки в мессенджерах;
- «Системы аналитики» — боты, которые собирают информацию о странице для работы аналитики (Яндекс Метрика, Google Analytics и подобные).