hotdj 33 Report post Posted May 14, 2010 Возник у меня такой вопросик. Сегодня просматривая модуль онлайн увидел что яндекс бот просматривает форум. когда-то давно я устанавливал форум дле. после чего удалил его. но по всей видимости что-то в базе осталось от этого форума, раз модуль показывает что он находится на форуме. Как убрать это? чистка базы ? второй вопрос. у меня существуют категории http://hotdj.ru/club-music/house/ но почему она так же доступна по ссылке http://hotdj.ru/house/ ?? раньше были такие категории, но я их удалил, и пересоздал все... Что теперь делать ? боты ходят и так и так. боюсь как бэ под фильтр не попасть из за дубля контента. Quote Share this post Link to post Share on other sites
prikindel 251 Report post Posted May 15, 2010 (edited) если форума больше нет, то закрой папку с форумом от пс в роботс.тхт ну и карту сайта загрузи в яндекс.вебмастер и гугл.вебмастер, должно помочь со временем. в догонку... гугл рекомендует использовать тэг каноникал, чтобы определить уникальность ссылки http://googlewebmastercentral.blogspot.com/2009/02/specify-your-canonical.html Edited May 15, 2010 by prikindel Quote Share this post Link to post Share on other sites
hotdj 33 Report post Posted May 16, 2010 Мне это ничего не дало )) тэг калоникал )) поподробнее мона ? своими словами всмысле ) Quote Share this post Link to post Share on other sites
prikindel 251 Report post Posted May 16, 2010 Canonical URL Материал из WikiSEO Много систем управления содержанием конфигурируются с ошибками, которые и являются причинами дублирования или исключительно одинакового содержания, которое вносится в индекс под несколькими URL адресам. Многие веб-мастеры используют несовместимые ссылочные структуры по всему своему сайту, которые вызывают точно такое же содержание которое вносится в индекс под несколькими URL адресами. Каноническая версия любого URL - единственная самая авторитетная версия, проиндексированная главными поисковыми машинами. Поисковые машины обычно используют PageRank или похожий инструмент, чтобы определить, какая версия URL является каноническим URL. Веб-мастера должны использовать совместимые ссылочные структуры на всем сайте, чтобы гарантировать, что они направляют максимальное количество PageRank в URL, которые они хотят внесенный в индекс. Когда переходишь по ссылке на корневой уровень сайта или индекс папки лучше заканчивать адрес сайта / вместо того, чтобы помещать index.html или default.asp имя файла в URL. Quote Share this post Link to post Share on other sites
zgr 72 Report post Posted May 21, 2010 Каким урлом заканчивать сайт - не имеет значения, лишь бы все ссылки имели постоянный редирект на одну и ту же главную страницу, иначе даже название домена с флешем или без - это два разных сайта на самом деле, но поисковики сейчас умеют автоматом такие странички клеить. "Каноникал" тоже не от всего спасает, да и смысла в нем нет особо - опять же автоматом поисковики определяют главную страницу... ну, если только вы принудительно хотите вручную ее задать У меня тоже аналогичная проблемка - недавно заметил, что на разные статьи можно попасть по разным урлам (например, добавив или удалив слово "категория") - ужас... Нужно хотакес нормально настроить (редиректы), но всё никак не засяду изучить это дело... с редиректами и каноникал не нужен Если кто быстрей разберется, как правильно настроить хотакес, было бы здорово здесь опубликовать, а пока я тупо наспех в роботсе кое-что заблокировал, но это корявый выход. Quote Share this post Link to post Share on other sites
hotdj 33 Report post Posted May 23, 2010 Так реальное решение проблемы какое ? ссылок на такие кривые категории уже нету. ссылки абсолютно все стоят правильно... подождать ещё немного пока вывалятся из индекса ? Quote Share this post Link to post Share on other sites
freeprogs.kiev.ua 0 Report post Posted December 17, 2010 Так реальное решение проблемы какое ? ссылок на такие кривые категории уже нету. ссылки абсолютно все стоят правильно... подождать ещё немного пока вывалятся из индекса ? Вот решение проблемы Quote Share this post Link to post Share on other sites
