Генератор Robots.txt

Створіть дійсний файл robots.txt для вашого сайту з директивами Allow, Disallow, Sitemap та Crawl-delay.

URL сайту Режим Robots

Шляхи для заборони (по одному на рядок) Шляхи для дозволу (по одному на рядок)

User-agent URL Sitemap Crawl-delay (секунди)

Створений robots.txt

Заповніть форму та натисніть створити, щоб побачити ваш robots.txt тут.

Генератор Robots.txt створює дійсний файл robots.txt, який повідомляє краулерам пошукових систем, які сторінки індексувати, а які пропускати.