altairr 1 Опубликовано: 7 марта 2013 Рассказать Опубликовано: 7 марта 2013 Вот такой вот вопрос,как правильно создать robots.txt или можно обойтись стандартным? Цитата Ссылка на сообщение Поделиться на других сайтах
celsoft 6 043 Опубликовано: 7 марта 2013 Рассказать Опубликовано: 7 марта 2013 Если у вас возник такой вопрос, то ответ однозначен, пользуйтесь стандартным, или вообще его удалите. Цитата Ссылка на сообщение Поделиться на других сайтах
altairr 1 Опубликовано: 7 марта 2013 Рассказать Опубликовано: 7 марта 2013 Автор Если у вас возник такой вопрос, то ответ однозначен, пользуйтесь стандартным, или вообще его удалите. Если его удалить,как сайт будет индексироваться? Цитата Ссылка на сообщение Поделиться на других сайтах
celsoft 6 043 Опубликовано: 7 марта 2013 Рассказать Опубликовано: 7 марта 2013 altairr, Как обычно. Этот файл не управляет индексацией, как таковой, он определяет что можно индексировать, что нельзя. Никто кроме вас не может знать что вам нужно индексировать, а что нет, это строго индивидуально. В стандартном файле попросту по умолчанию запрещаются к индексации служебные малозначимые страницы. Цитата Ссылка на сообщение Поделиться на других сайтах
Рекомендованные сообщения
Присоединяйтесь к обсуждению
Вы можете опубликовать сообщение сейчас, а зарегистрироваться позже. Если у вас есть аккаунт, войдите в него для написания от своего имени.