Как запретить сканировать страницы из раздела /tags?

[torber 0]

Доброго времени суток!
Подскажите пожалуйста, как запретить сканировать страницы из раздела /tags/? Какие-то "добрые" люди нагенерировали более 4000 страниц и гуглу это само собой не нравиться. И возможно есть вариант запретить еще создание страниц с помощью этого раздела?

Заранее благодарен

[celsoft 6 168]

файл robots.txt в корне

Disallow: /tags/

 

Либо раздел "Заголовки, описания, метатеги" в админпанели, где также можно указать Метатег Robots

[torber 0]

Дело в том, что в robots это уже давно прописано, но в гугл консоли появился такой вот алерт

https://ru.files.fm/u/z7rrvbk7u

[celsoft 6 168]

  16.05.2023 в 12:44, torber сказал:

Дело в том, что в robots это уже давно прописано, но в гугл консоли появился такой вот алерт

Расширить  

Значит запрещаете принудительно через метатеги в разделе "Заголовки, описания, метатеги"

[torber 0]

Это сегодня сделал, посмотрим как получится

В любом случае, спасибо за помощь!

[Captain 634]

  16.05.2023 в 14:22, torber сказал:

Это сегодня сделал, посмотрим как получится

Расширить  

Если используете метатег, то не забудьте запрет из robots.txt убрать, иначе не получится.