Боты и защита

Кейс docgard.ru: 32 из 33 ботов остановились на проверке

docgard.ru — сайт с конструкторами документов и калькуляторами, основной трафик из поиска. Мы подключили к нему nbots: сначала в режиме наблюдения, потом с защитой. Рассказываем, что увидели, как настроили и что получилось — с цифрами из кабинета.

Обновлено 11 ноября 20263 мин чтенияКоманда nbots

Содержание
  1. О сайте
  2. Как подключили
  3. Что показало наблюдение
  4. Как работает защита
  5. Что с поиском
  6. Выводы
  7. Частые вопросы

Коротко

  • Код подключили на уровне nginx — без правки сотен страниц.
  • Ботов немного, но это настоящие браузеры, которые портят статистику и ПФ.
  • В режиме защиты 32 из 33 ботов, выполнивших JavaScript, остановились на проверке.
  • Поисковые роботы проходят без проверки — индексация не пострадала.

О сайте

  • Что за сайт: бесплатные конструкторы документов — договоры, акты, расписки — и калькуляторы.
  • Трафик: в основном из поиска Яндекса и Google. Форм заявок нет, поэтому главное для сайта — позиции и честная статистика.
  • Как устроен: статические страницы на nginx, сотни адресов.
  • Зачем защита: сайт растёт в поиске, и вместе с ним растёт интерес ботов — накрутчиков, парсеров, сканеров.

Как подключили

Страниц много, и править каждую не хотелось. Поэтому код nbots добавили на уровне сервера: nginx сам вставляет одну строку в каждую страницу перед отправкой посетителю. Файлы сайта при этом не менялись, а отключить защиту можно одной командой.

Первую неделю nbots работал в режиме наблюдения: ничего не блокировал, только записывал, кто приходит и почему он похож на человека или бота.

Что показало наблюдение

~240людей за обычный будний день
~360визитов поисковых роботов за тот же день
15–20ботов и подозрительных посетителей

Данные кабинета nbots за один будний день ноября 2026 года, округлено.

  • Людей больше, чем ботов, но роботов больше, чем людей. Поисковые роботы активно обходят сайт: в обычный день это сотни визитов, волнами в рабочее время.
  • Ботов немного, но они настоящие. Это не «пустые» запросы из скриптов, а браузеры, которые выполняют JavaScript, — именно такие боты попадают в Метрику и портят поведенческие факторы.
  • Боты выдают себя противоречиями: подменённые параметры браузера, движок не совпадает с заявленным, часовой пояс не совпадает с адресом, адреса хостингов.
  1. Подключение на уровне nginx: одна строка вставляет код nbots во все страницы.

  2. Неделя наблюдения: nbots ничего не блокирует, только записывает визиты и причины.

  3. Разбор: кто боты, откуда, по каким признакам; проверка, что людей не считают ботами.

  4. Включение режима защиты: подозрительные получают проверку, люди и поисковики — нет.

Как работает защита

После наблюдения включили режим защиты. Теперь подозрительный посетитель сначала видит короткую проверку: браузер решает небольшую вычислительную задачу, а человек нажимает одну кнопку. Люди с обычными браузерами проверку не видят вовсе. Проверенные поисковые роботы Яндекса и Google проходят без проверки — их подлинность подтверждается по DNS.

32 из 33ботов, выполнивших JavaScript, остановились на проверке
0ошибок доступа для поисковых роботов в Вебмастере
1 строкав настройках nginx, файлы сайта не менялись

Что с поиском

Главный страх при включении защиты — помешать индексации. На docgard этого не произошло: поисковые роботы продолжают обходить сайт сотнями визитов в день, а в Вебмастере не появилось ошибок доступа. Проверка показывается только тем, кто не прошёл оценку как человек и не является подтверждённым роботом.

Хотите так же?

Подключите nbots в режиме наблюдения — это бесплатно до 3 000 визитов в месяц и ничего не блокирует. Через неделю будет видно, нужна ли вашему сайту защита.

Выводы

  1. Ботов на небольшом сайте может быть немного — но это «дорогие» боты. Они работают в настоящих браузерах и влияют на статистику и поведенческие факторы.
  2. Защита на уровне сервера подключается без правки страниц — это удобно для статичных сайтов и больших каталогов.
  3. Наблюдение перед защитой обязательно. Оно показывает, есть ли проблема, и помогает убедиться, что людям ничего не мешает.
  4. Поисковики защите не мешают, если проверять их подлинность, а не верить User-Agent.

Частые вопросы

Сколько времени заняло подключение?

Несколько минут: одна строка в настройках nginx, проверка и перезагрузка. Файлы сайта не менялись.

Не упал ли трафик после включения защиты?

Нет. Люди с обычными браузерами проверку не видят, а поисковые роботы проходят без неё. Остановились только боты.

Можно ли так же подключить сайт без своего сервера?

Да: на хостинге, конструкторе или CMS код ставится в шапку сайта, как счётчик Метрики. Подключение через nginx — вариант для тех, у кого свой сервер.

Что за бот не остановился на проверке?

Один из 33 прошёл проверку: проверка рассчитана так, чтобы не мешать людям, поэтому очень хорошо замаскированный бот иногда её проходит. Такие визиты остаются отмеченными в кабинете, и их видно в статистике.

Почему ботов так мало?

Сайт без форм и рекламы менее интересен спам-ботам и скликиванию. Основные боты здесь — накрутка и парсинг из поиска. На сайтах с рекламой и формами ботов обычно больше.

Заметили ли посетители проверку?

Большинство — нет: люди с обычными браузерами проходят без проверки. Её видят только посетители с подозрительными признаками, например с подменёнными параметрами браузера.

Можно ли посмотреть кабинет docgard?

Кабинет закрытый, но такой же отчёт появится и у вас после подключения своего сайта — с графиком по часам, источниками ботов и причинами по каждому визиту.

Читайте также