Дубли страниц, как исправить

[Bandos 0]

Проблема в том, что таким способом сайт можно загнать в бан или под фильтр за дубли, как с этим бороться?

примеры(одна и та же новость открывается с любым набором букв и цифр):

http://dle.net.ua/templates/5773-takie.html

http://dle.net.ua/templates/5773-dela.html

http://dle.net.ua/templates/5773-kak-icpravit.html

[FreeRider 8]

Таких тем на форуме уже штук 10 точно было. Эти дубли появятся только если вы сами их будете делать.

[Bandos 0]

ну а вдруг у меня есть конкурент, если я сам не буду делать, то он за меня сделает и Яндекс даже спрашивать не будет. Есть ли решение проблемы?

[celsoft 6 068]

ну а вдруг у меня есть конкурент, если я сам не буду делать, то он за меня сделает и Яндекс даже спрашивать не будет. Есть ли решение проблемы?

Интересно как ваш конкурент, добавить такие ссылки на вашем сайте и не спросив вас. Используйте поиск, уже много раз расписывалось по этому вопросу по пунктам, в том числе и по яндексу. И добавить что либо к URL можно на любом движке к любому сайту, в том числе и к яндексу. Дубликаты будут только тогда когда вы их сами добавите, редактируя ЧПУ.

[Bandos 0]

Ситуация такая у меня сайт попал под АГС. В индексе осталась только главная и категории + самое непонятное дубли категорий!

Cмотрю я в панеле веб-мастера, а он мне показывает, что в индексе дубли категорий:

http://site.ru/video/

http://site.ru/video

http://site.ru/video2/

http://site.ru/video2

искал на форуме решение проблемы, но что-то не увидел... Ткните носом на тему плз.

[inokentik 45]

Сейчас посмотрел у себя, движок ставил с нуля, ЧПУ не менял... В итоге есть доступ как к странице http://www.nokia-soft.su/page/4 так и к странице http://www.nokia-soft.su/page/4/

Это вредно вообще и считается ли за дубль?

[celsoft 6 068]

Bandos,

ищите проблему в своем шаблоне, вы ставили где то ссылки на категории без слешев на конце.

[shtep4ik 0]

А вот это как Вы прокомментируете ?

http://yandex.ua/yandsearch?text=dle-polnoe-gavno.html&lr=141&&ncrnd=4190

Если вдруг выдача изменится:

На оф сайте уже залатали, а вот пользователям багфикс тяжело сделать ?

Изменено 14 марта 2011 пользователем shtep4ik

[celsoft 6 068]

shtep4ik,

Здесь нет никакого баг фикса, и на сайте ничего не залатывалось, а поставлен редирект от таких вот глупых вопросов.

А для уникальный адресов есть тип ЧПУ номер 3 в настройках скрипта или отключение ЧПУ

Что то несмотря на все "потуги" сайт dle-news.ru не попал ни в какие фильтры и ни в какие баны поисковиков, и не была снижена его релеватность. Зато на сайтах где вы это прочитали активно продвигается платное исправление якобы мега бага. Хотите покупайте, дело ваше. Для этого и был поставлен редирект, чтобы такие вот наивные люди не бежали и не тратили свои же деньги.

[shtep4ik 0]

celsoft, а Вы не считаете нужным рассказать всем как делался этот 301 редирект ? И если бы Вы вовремя не заметили, и ссылок было больше, то Ваш сайт давно уже получил бы АСГ у Яндекса как минимум.

[WWW.ZEOS.IN 1 161]

shtep4ik,

http://forum.dle-news.ru/index.php?showtopic=53698&st=0&p=261772&#entry261772

и

http://g.zeos.in/?q=%D1%80%D0%B5%D0%B4%D0%B8%D1%80%D0%B5%D0%BA%D1%82

Изменено 17 марта 2011 пользователем WWW.ZEOS.IN

[celsoft 6 068]

не считаете нужным рассказать всем как делался этот 301 редирект ? И если бы Вы вовремя не заметили, и ссылок было больше, то Ваш сайт давно уже получил бы АСГ у Яндекса как минимум.

Не считаю. Редиректы должен уметь делать любой вебмастер, делающий свой сайт. А про бан это лишь ваши домыслы и не более того. Сайту уже шесть лет и такие попытки были уже сотни раз, только толку от них нет. И ни о каком "вовремя заметили" речи здесь не идет. И такой ЧПУ был всегда, а не вчера появился. И это не является какой либо уязвимостью для которой бы выпускалось какое либо исправление. И непонятно с каких пор ACГ стал применяться к дублям и к адресу URL? АСГ фильтр всегда применялся к контенту сайта, и к попыткам манипулирования поисковиками в целях продвижения сайта в поисковиках. А прописать чушь в URL можно и к самому сайту Яндекса и проспамить этот URL на других сайтах. Это вообще можно сделать на любом сайте, на любом движке, параметры URL очень обширны.

[av2678880 0]

Раз администрация отказывается помогать, будем решать проблему самостоятельно. Я тоже не "любой вебмастер", я вообще ничего не понимаю в кодах и прочем, но с сайтом (а точнее - с его дырами) приходится работать. Вот что помогло мне решить вопрос со слешами в категорих:

RewriteBase /

RewriteCond %{REQUEST_FILENAME} !-f

RewriteCond %{REQUEST_FILENAME} !-d

RewriteCond %{REQUEST_URI} !-f

RewriteCond %{REQUEST_URI} !/$

RewriteCond %{REQUEST_URI} !.html$

RewriteCond %{REQUEST_URI} !.xml$

RewriteRule (.*) http://www.вашдомен.ru/$1/ [R=301,L]

пришлось порыть форумы и методом проб и ошибок чуть поправить решение (мне требовалось перенаправить со страниц "сайт/категория" на страницы "сайт/категория/". Содержимое кода мне ни о чем не говорит - возможно тут есть что-то лишнее) главное, что работает.

Прошу поделиться инструкциями для решения других проблем:

1. Отображение новости в чужих категориях (сайт/фото/1-новость.html = сайт/сиски/1-новость.html)

2. Отображение новости под чужим именем (сайт/категория/1-новость.html = сайт/категория/1-сиски.html = сайт/категория/1-ыаусвуа.html)

Заранее спасибо) Прошу только в поиск не тыкать, честное слово - искал несколько часов и ничего толкового не нашел.

Нашел только http://seonetwork.biz/topic78.html (правки в engine/engine.php), но почему-то не помогло...

[shtep4ik 0]

Не считаю. Редиректы должен уметь делать любой вебмастер, делающий свой сайт.

Вы хотите сказать что сделали 301 редиректы без вмешательства в код ?

[WebSet 74]

На счет дублей. На сколько мне известно, яндекс выкидывает дубли страниц из поиска и оставляет в нем только релевантные страницы, по его мнению, а если страница уг - удаляет и ее =)

[abasive 41]

Кто знает как можно иправить дублированные страниц если заполнен титле категории?

[DeeMon 73]

по его мнению, а если страница уг - удаляет и ее

Так оно и есть.

[abasive 41]

Неужели нет решении данной задачи?

[celsoft 6 068]

Кто знает как можно иправить дублированные страниц если заполнен титле категории?

это не дублирование страниц, а одинаковый заголовок у страниц, вещи принципиально разные, что либо особо исправлять нет никакой надобности.

откройте файл engine/engine.php

строчку

if ( $metatags['header_title'] ) $metatags['title'] = stripslashes($metatags['header_title']);

замените на

if ( $metatags['header_title'] ) $metatags['title'] = stripslashes($metatags['header_title'].$page_extra);

необходимо наличие версии скрипта 9.2 на сервере.

[abasive 41]

Спасибо то что надо