Pembuat robots.txt

Buat satu grup User-agent dengan Allow, Disallow, dan peta situs opsional. Aturan ini tidak menyediakan kontrol akses.

Maksimal 100.000 unit UTF-16 per masukan dan 1.000.000 per hasil. Lihat format yang didukung dan contoh di bawah.