Курсы обучения
+7 (351) 777-80-70
2021.09.03

Как закрыть от индексации Яндекса страницы сайта?

Чтобы запретить Яндексу индексировать страницы, необходимо внести изменения в файл robots.txt, который находится в корне сайта. 
А именно: прописать соответствующие директивы.

Директивы Disallow и Allow

Для закрытия от индексации страниц сайта следует использовать директивы Disallow и Allow, лучше всего использовать официальную документацию Яндекса - https://yandex.ru/support/webmaster/robot-workings/allow-disallow.html

Как закрыть от индексации Яндекса GET параметры сайта?

Иногда возникает ситуация, когда поисковик Яндекс жалуется на страницы-дубли с GET-параметрами.
Некоторые страницы с GET-параметрами в URL дублируют содержимое других страниц (без GET-параметров).

Чтобы запретить Яндексу индексировать страницы с GET-параметрами, необходимо  также внести изменения в файл robots.txt.

Директива Clean-Param

При выборе директивы для страниц, которые не должны участвовать в поиске, если их адреса содержат GET-параметры, лучше использовать директиву Clean-param, а не Disallow. При использовании Disallow может не получиться выявить дублирование адреса ссылки без параметра и передать некоторые показатели запрещенных страниц.
Более подробно в официальной документации Яндекса -https://yandex.ru/support/webmaster/robot-workings/clean-param.html

Наши решения