Генератор robots.txt онлайн онлайн
Файл robots.txt для сайта: правила для всех роботов, запрет разделов, разрешённые пути, ссылка на sitemap и главное зеркало для Яндекса. Калькулятор доступен бесплатно, работает на компьютере и телефоне и подходит для быстрой проверки расчётов.
Как пользоваться калькулятором «генератор robots.txt онлайн»
- Введите «Адрес сайта».
- Введите «Закрыть от индексации (по одному пути в строке)».
- Введите «Разрешить явно (по одному пути в строке, необязательно)».
- При необходимости включите «Отдельный блок для Яндекса (Clean-param)».
- Введите «Параметры для Clean-param через &».
- Укажите «Пауза между запросами робота, сек.» — 0 — не указывать.
- Результат появится справа мгновенно — нажимать кнопку «Рассчитать» не нужно.
Формула расчёта
Файл состоит из блоков User-agent с правилами Disallow и Allow, строки Sitemap с адресом карты сайта. Блок для Яндекса может содержать директиву Clean-param.
Пример расчёта
Если адрес сайта — https://example.ru; закрыть от индексации (по одному пути в строке) — /admin/ /search/ /cart/ /*?utm_; разрешить явно (по одному пути в строке, необязательно) — ; отдельный блок для Яндекса (Clean-param) — нет; пауза между запросами робота, сек. — 0, то результат: правил: 4.
Частые вопросы
Где должен лежать robots.txt?
В корне сайта: https://example.ru/robots.txt. В подпапках робот его не ищет.
Чем Disallow отличается от noindex?
Disallow запрещает роботу обходить страницу, а noindex запрещает показывать её в выдаче. Для исключения из индекса нужен noindex.
Нужна ли директива Host?
Для Яндекса она больше не используется: главное зеркало задаётся в Вебмастере и редиректом.
Как пользоваться калькулятором «генератор robots.txt онлайн»?
Заполните поля формы — результат рассчитывается автоматически и обновляется при каждом изменении значений. Можно скопировать результат, распечатать страницу или отправить ссылку с вашими данными.
По какой формуле считает калькулятор «генератор robots.txt онлайн»?
Файл состоит из блоков User-agent с правилами Disallow и Allow, строки Sitemap с адресом карты сайта. Блок для Яндекса может содержать директиву Clean-param.
Нужно ли регистрироваться и платить?
Нет. Калькулятор бесплатный и работает без регистрации. Введённые данные обрабатываются в вашем браузере и никуда не отправляются.
Часто ищут: генератор robots txt · robots txt пример
Страница обновлена: 01.11.2026. Формулы и значения проверяются при каждом обновлении каталога.