Генератор robots.txt

Создаёт группу User-agent с Allow, Disallow и необязательным Sitemap. Это не ограничение доступа.

Преобразование в браузере · Без регистрации

Создаёт группу User-agent с Allow, Disallow и необязательным Sitemap. Это не ограничение доступа.

До 100 000 единиц UTF-16 на ввод и 1 000 000 на результат. Поддерживаемые форматы и примеры приведены ниже.

Как пользоваться

  1. Создаёт группу User-agent с Allow, Disallow и необязательным Sitemap. Это не ограничение доступа.
  2. Выберите параметры и запустите обработку.
  3. Проверьте результат, скопируйте или скачайте.

Пример

User-agent: *
Disallow: /admin/
Allow: /admin/public/

Подробности и ограничения

Создаёт группу User-agent с Allow, Disallow и необязательным Sitemap. Это не ограничение доступа.

Обработка выполняется в браузере.

FAQ

Допустимые данные и ограничения

Создаёт группу User-agent с Allow, Disallow и необязательным Sitemap. Это не ограничение доступа.

Справочники по форматам

Страница инструмента обновлена: