kabban 6 Опубликовано: 22 декабря 2011 Рассказать Опубликовано: 22 декабря 2011 нужно запретить индексацию яндексу и рамблеру, а всем остальным разрешить. код вставил сам, но видимо что то не так, всё равно ходят гады. Цитата Ссылка на сообщение Поделиться на других сайтах
ower_xz 117 Опубликовано: 22 декабря 2011 Рассказать Опубликовано: 22 декабря 2011 (изменено) User-agent : Yandex Disallow : / User-agent: StackRambler Disallow : / Ходить по сайту вы им все-равно не запретите, но индексировать ваш сайт они выдавать не будут. Изменено 22 декабря 2011 пользователем ower_xz Цитата Ссылка на сообщение Поделиться на других сайтах
Captain 623 Опубликовано: 22 декабря 2011 Рассказать Опубликовано: 22 декабря 2011 User-agent: StackRambler не актуален уже, Рамблер использует поиск Яндекса, как Mail технологию Google. Для Яндекса и Рамблера указывается: User-agent : Yandex Для Google и Mail: User-agent: Googlebot 1 Цитата Ссылка на сообщение Поделиться на других сайтах
Adobe 111 Опубликовано: 22 декабря 2011 Рассказать Опубликовано: 22 декабря 2011 Я думал рамблер умер давно оО 1 Цитата Ссылка на сообщение Поделиться на других сайтах
Captain 623 Опубликовано: 22 декабря 2011 Рассказать Опубликовано: 22 декабря 2011 Я думал рамблер умер давно оО Тож, давно не пользовался. Цитата Ссылка на сообщение Поделиться на других сайтах
kabban 6 Опубликовано: 22 декабря 2011 Рассказать Опубликовано: 22 декабря 2011 Автор User-agent: * Disallow : /contact/ /add/ /login/ User-agent : Yandex Disallow : / так правильно? Цитата Ссылка на сообщение Поделиться на других сайтах
Captain 623 Опубликовано: 22 декабря 2011 Рассказать Опубликовано: 22 декабря 2011 Скорее так: User-agent: Googlebot Disallow: /contact/ Disallow: /add/ Disallow: /login/ User-agent: Yandex Disallow: / Цитата Ссылка на сообщение Поделиться на других сайтах
kabban 6 Опубликовано: 22 декабря 2011 Рассказать Опубликовано: 22 декабря 2011 (изменено) Автор мне надо разрешить всем кроме яндекса, а вот это Disallow: /contact/ Disallow: /add/ Disallow: /login/ запретить всем. Изменено 22 декабря 2011 пользователем kabban Цитата Ссылка на сообщение Поделиться на других сайтах
kabban 6 Опубликовано: 1 января 2012 Рассказать Опубликовано: 1 января 2012 Автор мне надо разрешить всем кроме яндекса, а вот это Disallow: /contact/ Disallow: /add/ Disallow: /login/ запретить всем. актуально!!! Цитата Ссылка на сообщение Поделиться на других сайтах
ower_xz 117 Опубликовано: 2 января 2012 Рассказать Опубликовано: 2 января 2012 kabban, вам же уже ответил Captain. Если нужно всем запретить, то дополнительно указываете то же самое для все пауков. User-agent: * Disallow: /contact/ Disallow: /add/ Disallow: /login/ User-agent: Googlebot Disallow: /contact/ Disallow: /add/ Disallow: /login/ User-agent: Yandex Disallow: / Цитата Ссылка на сообщение Поделиться на других сайтах
- Den - 32 Опубликовано: 2 января 2012 Рассказать Опубликовано: 2 января 2012 Если запрещено всем User-agent: * то уже ничего не нужно, потому что мы уже запретили всем. Цитата Ссылка на сообщение Поделиться на других сайтах
kabban 6 Опубликовано: 2 января 2012 Рассказать Опубликовано: 2 января 2012 Автор ок, спасибо. Цитата Ссылка на сообщение Поделиться на других сайтах
Рекомендованные сообщения
Присоединяйтесь к обсуждению
Вы можете опубликовать сообщение сейчас, а зарегистрироваться позже. Если у вас есть аккаунт, войдите в него для написания от своего имени.