Дублированные страницы

[andre1987 0]

Добрый день.

Сайт http://funlol.ru

Решили сменить дизайн и дизайнеры наделали ошибок прописали категории так:

<a href="horror/">X-Файлы</a> а надо было <a href="/horror/">X-Файлы</a> (забыли в первом случаи слеш поставить) в последствие гугл и яндекс начали индексировать страницы такого вида http://funlol.ru/kreativ/horror/factu/demotivator/

Эта ссылка ведет на категорию демотиваторов и доступна она по адресу http://funlol.ru/demotivator/. Получается дублированные страницы. Может кто-то знает как убрать из индекса такого вида страницы http://funlol.ru/kreativ/horror/factu/demotivator/ ??? Может надо как то прописать 301 в .htaccess??? Буду рад любой помощи. Заранее благодарю

[Adobe 111]

http://www.robotstxt.org/

[andre1987 0]

проблема решена. просто надо было включить в настройках скрипта опцию "Обрабатывать неверные URL ЧПУ"

[Adobe 111]

как убрать из индекса такого вида страницы http://funlol.ru/kre...tu/demotivator/ ?

проблема решена. просто надо было включить в настройках скрипта опцию "Обрабатывать неверные URL ЧПУ"

Думаю вряд ли Изначально надо сообщать роботу, что забирать не надо.

[andre1987 0]

Ошибка не моя. Как только увидел по 500к страниц загруженных роботом сразу понял что косяк в дизайне. Быстро все поправил, перепроверил и теперь жду пока робот будет уменьшать страницы. В яше было загружено 500к а сейчас осталось 165к

как убрать из индекса такого вида страницы http://funlol.ru/kre...tu/demotivator/ ?

проблема решена. просто надо было включить в настройках скрипта опцию "Обрабатывать неверные URL ЧПУ"

Думаю вряд ли Изначально надо сообщать роботу, что забирать не надо.