Создание правил обхода
Генератор помогает подготовить указания поисковым роботам с учётом разделов, которые следует или не следует посещать.
Что вы получите
Вы получаете заготовку для конфигурации обхода.
Использование инструмента
- Выберите генератор.
- Укажите правила.
- Проверьте пример.
- Сохраните результат.
- Разместите файл на сайте.