Нежелательный трафик: GEO и защита сайта в BuildNexus

Сайт получает много запросов к случайным адресам, в статистике растут ошибки, а среди обращений виден ненужный автоматический обход. Возникает задача: ограничить этот трафик и проверить, что нужные посетители и поисковые роботы сохраняют доступ. В BuildNexus Studio для этого есть просмотр запросов, проверка правил на истории, режим наблюдения и блокировка.
Начнём с разбора обращений. После этого выберем условия, посмотрим, кого они затрагивают, и только затем решим, включать ли ограничение. GEO в этой статье означает определение страны по IP-адресу и использование страны в правилах доступа.
Скриншоты сделаны в Studio и CRM на учебном проекте: события и контакты вымышлены. Нажмите изображение, чтобы открыть его в полном размере.
Сначала выясняем, что именно нужно ограничить
Откройте «SEO и аналитика» → «Трафик и защита». Выберите опубликованный сайт, точный домен и период. Найдите время всплеска, посмотрите запрашиваемые адреса, коды ответов и категории клиентов. Раскройте примеры запросов.
Пример. Допустим, за короткое время выросло число запросов к адресам, которых на сайте никогда не было. Это повод изучить автоматический обход. Если ошибки возникают на существующей странице товара после её переименования, сначала проверьте ссылки и перенаправление.
SEO-специалист определяет важные страницы и поисковые сервисы, которым нужен доступ. Администратора стоит подключить, если для выбора условий нужны серверные журналы, настройка DNS или проверка внешней защиты сайта.
Страна IP помогает сузить выборку, но сама по себе не доказывает вредность запроса. Пользователь может находиться за VPN, а поисковый робот — обращаться с зарубежного сервера. Список стран обслуживания магазина тоже не описывает всех, кому нужен доступ к его страницам.

Выбираем условия для конкретной задачи
Перейдите в «Управление защитой». Для работы нужны подключение владельца и совместимые версии Studio и ядра сайта.
В правиле можно указать домен, путь и другие признаки запроса. Все заполненные условия должны выполняться одновременно. Например, домен, путь /catalog/ и выбранная страна ограничивают область правила этой частью каталога. Если путь не задан, условие может затронуть весь домен.
Если задача связана с географией доступа, включите GEO в черновике. Предварительно установите справочник стран кнопкой «Загрузить справочник из S3» или из подходящего файла Country MMDB — базы для определения страны по IP. Страны определяются локально на сервере. Загрузка справочника сама по себе блокировку не включает.
Доступны два режима:
- «Блокировать выбранные страны». GEO-условие затрагивает отмеченные страны.
- «Разрешать только выбранные страны». GEO-условие затрагивает все страны за пределами списка. Отдельно выберите, что делать, если страну определить не удалось.
Разрешающий список требует особенно внимательной проверки: под него могут попасть покупатели в поездке, пользователи VPN и внешние сервисы. Выбирайте географию по конкретной задаче и данным отчёта.

Проверяем доступ поисковых роботов
В GEO-блоке найдите «Пропускать подтверждённые сервисы». Здесь предусмотрены Google Поиск и Search Console, Яндекс Поиск и Вебмастер, Bing и серверные роботы Яндекс Метрики. Проверьте нужные галочки и итоговый список перед включением.
Подлинность робота проверяет сервер: одного названия Googlebot в запросе недостаточно. Это позволяет применять GEO-исключения к подтверждённым поисковым сервисам. Исключение относится к конкретному GEO-правилу; другие действующие ограничения нужно проверить отдельно.
При временной недоступности проверки подлинности возможен ответ 503 с предложением повторить запрос через пять минут. Если такие ответы сохраняются, администратору нужно проверить DNS на сервере.
Галочка Метрики относится к её серверным роботам. Обычный счётчик работает в браузере посетителя: если человеку закрыт доступ к странице, эта галочка его не откроет.
Сначала включаем наблюдение
- Выберите действие «Наблюдать», задайте условия, причину и короткий срок. По умолчанию предлагается 15 минут.
- Нажмите «Проверить на истории». Посмотрите число совпадений, примеры и предупреждения о недостатке данных.
- Если правило затрагивает нужные страницы или аудиторию шире ожидаемого, уточните условия и повторите проверку.
- Включите наблюдение отдельной кнопкой. В этом режиме запросы проходят, а совпадения отмечаются.
- Посмотрите свежие совпадения: соответствует ли реальный трафик вашей задаче?
История помогает оценить правило на доступных данных. Если в старых записях нет страны или результата проверки робота, точной оценки может не быть. Ноль совпадений на истории тоже требует проверки в наблюдении.

Включаем блокировку и проверяем результат
Если наблюдение подтвердило нужную область действия, подготовьте правило с действием «Блокировать». Повторите проверку на истории: изменение действия, срока или условий требует новой проверки. Перед включением сверьте сервер, домен, пути, страны, исключения и срок.
После включения подходящие запросы получают ответ 403 — доступ запрещён. Правило начинает работать сразу на подключённом сервере; публикация файлов сайта для этого не нужна.
Проверьте три результата:
- Нежелательные запросы совпадают с правилом и получают ожидаемый ответ.
- Нужные посетители могут открыть страницы и отправить формы.
- Поисковые сервисы получают предусмотренный доступ: проверьте свежие примеры запросов, подтверждение сервисов и применённые исключения.
Если обнаружили лишние ограничения, используйте «Отменить правило» в списке действующих правил и укажите причину. Закрытие окна или выключение GEO в новом черновике действующую блокировку не отменяет.
Как использовать агента при разборе трафика
Оставьте открытым отчёт с примерами и нажмите «Агент». Например:
«Разбери всплеск запросов. Какие адреса и категории клиентов его создали? Какие данные нужны, чтобы отделить ненужный обход от полезных обращений? Предложи узкое условие для наблюдения и проверки доступа посетителей и поисковиков».
Проверьте предложенные условия по данным отчёта. Обсуждение с агентом само по себе не включает правило.
Что важно знать перед постоянным ограничением
Временное правило можно задать на срок от минуты до суток. «Постоянно — до отмены» выбирается явно, если это поддерживает ядро: такое правило сохраняется после перезапуска. При редактировании старое правило действует до сохранения проверенной замены.
Правила BuildNexus охватывают запросы, дошедшие до ядра сайта. Для проблем на уровне канала связи, Apache, CDN или внешнего кеша потребуется проверка соответствующего уровня. Наблюдение и исключение одного GEO-правила также не отменяют другие блокировки.
Подробные параметры доступны в «Справке» раздела защиты. О размещении и обновлении ядра — в документации по публикации.
Если сначала нужно разобраться в составе переходов, откройте отчёт об источниках и заявках. Для остальных задач специалиста — обзор SEO-аналитики и руководство по SEO-настройкам.
Пошаговая инструкция: как пользоваться SEO-инструментами Studio на своём проекте.