Играет ли роль последовательность правил в robots.txt

Последовательность расположения правил в robots.txt не играет никакой роли. Не обязательно располагать сначала Disallow, а за ним Allow.

Директивы Allow и Disallow из соответствующего User-agent блока сортируются по длине префикса URL (от меньшего к большему) и применяются последовательно. Если для данной страницы сайта подходит несколько директив, то робот выбирает последнюю в порядке появления в сортированном списке. Таким образом, порядок следования директив в файле robots.txt не влияет на использование их роботом.

Источник: Справка Яндекса

Таким образом порядок расположения правил в файле robots.txt не играет никакого значения. Все правила сортируются по длине URL и применяются по возрастанию длины.

Аналогично описано в Справке Google:

Когда роботы соотносят правила из файла robots.txt с URL, они используют самое строгое правило (с более длинным значением пути). При наличии конфликтующих правил (в том числе с подстановочными знаками) выбирается то, которое предполагает наименьшие ограничения.

Вам помог ответ?
Похожие вопросы
Не работают, не переключаются вкладки
+3
Ваш сайт не смог выполнить петлевой запрос
+2
Нужно ли покупать Clearfy, если у меня Ваша тема?
+18
После активации плагина все ошибки остались
+1
Как удалить все настройки Clearfy Pro?
+1
Divi Builder и Clearfy Pro
+1
Плагин clearfy/clearfy.php был деактивирован из-за ошибки: Файл плагина не найден
+0
После перехода на HTTPS сайт перестал открываться
+0
Не могу обновить Clearfy Pro, обновление видит, а кнопки нет
+0
Какой хостинг подходит для хороших результатов в PageSpeed?
+8
Как выполнить действие после выбора ответа в опросе
+0
Как выровнять меню под шапкой по центру?
+9
Как вывести встроенную форму подписки?
+8
Как вывести рекламу на страницах?
+8
Как вывести виджеты в подвале сайта?
+8
Что означает ошибка publisher в микроразметке?
+8
Поддерживает ли тема английский язык?
+7
Как изменить поля формы обратной связи?
+6
Как изменить количество записей на главной и в рубриках
+6
Как во встроенном слайдере вместо записей выводить страницы?
+6