2021.09.03
Как закрыть от индексации Яндекса страницы сайта?
Чтобы запретить Яндексу индексировать страницы, необходимо внести изменения в файл
robots.txt, который находится в корне сайта.
А именно: прописать соответствующие директивы.
Директивы Disallow и Allow
Для закрытия от индексации страниц сайта следует использовать директивы Disallow и Allow, лучше всего использовать официальную документацию Яндекса -
https://yandex.ru/support/webmaster/robot-workings/allow-disallow.html
Как закрыть от индексации Яндекса GET параметры сайта?
Иногда возникает ситуация, когда поисковик Яндекс жалуется на страницы-дубли с GET-параметрами.
Некоторые страницы с GET-параметрами в URL дублируют содержимое других страниц (без GET-параметров).
Чтобы запретить Яндексу индексировать страницы с GET-параметрами, необходимо также внести изменения в файл
robots.txt.
Директива Clean-Param
При выборе директивы для страниц, которые не должны участвовать в поиске, если их адреса содержат GET-параметры, лучше использовать директиву
Clean-param, а не Disallow. При использовании Disallow может не получиться выявить дублирование адреса ссылки без параметра и передать некоторые показатели запрещенных страниц.
Более подробно в официальной документации Яндекса -
https://yandex.ru/support/webmaster/robot-workings/clean-param.html
Наши решения