1. Исправление синтаксической ошибки в правиле Disallow
SEO-специалистКонтекст
Специалист подготовил новый файл robots.txt для интернет-магазина, но хочет убедиться, что правила написаны без ошибок.
Проблема
В директиве Disallow пропущено двоеточие, из-за чего правило может быть проигнорировано роботами.
Как использовать
Вставьте текст robots.txt в поле ввода, укажите адрес сайта https://myshop.com и добавьте тестовый URL /admin для проверки.
robotsText: "User-agent: *\nDisallow /admin\nAllow: /admin/help", siteOrigin: "https://myshop.com", testUrls: "/admin"Результат
Валидатор обнаружил 1 синтаксическую ошибку (пропущенное двоеточие после Disallow) и вывел отчет в формате JSON.