Генератор robots.txt

Создаёт группу User-agent с Allow, Disallow и необязательным Sitemap. Это не ограничение доступа.

До 100 000 единиц UTF-16 на ввод и 1 000 000 на результат. Поддерживаемые форматы и примеры приведены ниже.