RSS импорт новостей

[leksey 0]

Обновил движек с до 9,2 и перестал работать RSS

на сайте http://www.clipso.name/ пересталь работать RSS информер

пишет:

Fatal Error

Fatal Error: could not open XML input (http://news.yandex.ru/index.rss)

На сайте http://www.rumontazh.ru, перестал работать RSS импорт новостей

пишет, что "С момента последнего получения новостей, новых новостей в данном потоке не появилось.", а фактически новости есть.

В чем может быть причина?

Изменено 12 января 2011 пользователем leksey

[celsoft 6 076]

leksey,

Это никак не связано с обновлением скрипта.

Fatal Error: could not open XML input (http://news.yandex.ru/index.rss)

означает что нет доступа к источнику. Причины: либо данный сайт был недоступен в момент проверки (следующая проверка будет через час) либо на вашем сервере отключены исходящие соединения к внешним сайтам. По первой проблеме, можно очистить кеш в админпанели скрипта, и скрипт повторно обратиться к сайту, если причина вторая, то нужно обращаться к вашему хостинг провайдеру.

На сайте http://www.rumontazh.ru, перестал работать RSS импорт новостей

пишет, что "С момента последнего получения новостей, новых новостей в данном потоке не появилось.", а фактически новости есть.

скорее всего не совпадают ваши даты с датами на сервере, или меняли часовые пояса, просто зайдите в редактирование это канала и пересохраните без изменений. Это сбросит дату последнего получения новостей с источника.

[Andolini 0]

Вот в шаблонах в комлектации, тоже RSS не работает по ссылке http://xaxa.ykt.ru/rss.xml, пишет "Not Found. The requested URL /rss.xml was not found on this server."

Кстати, при отключении ЧПУ в типовых шаблонах на "Добавить новость" стоят ссылки на "http://xaxa.ykt.ru/addnews.html", когда как корректней должно быть "http://xaxa.ykt.ru/index.php?do=addnews".

[leksey 0]

leksey,

Это никак не связано с обновлением скрипта.

На сайте http://www.rumontazh.ru, перестал работать RSS импорт новостей

пишет, что "С момента последнего получения новостей, новых новостей в данном потоке не появилось.", а фактически новости есть.

скорее всего не совпадают ваши даты с датами на сервере, или меняли часовые пояса, просто зайдите в редактирование это канала и пересохраните без изменений. Это сбросит дату последнего получения новостей с источника.

Так и сделал

Вот результат:

При попытки получить новости из канала появилась новость с заголовком:

Fatal Error

Далее кликаем по ней выходит текст новости:

Fatal Error: could not open XML input (http://www.ruscable.ru/rss/news.rss)

и так по всем каналам

что стало не так, все предыдущие обновления такого не выдавали, хостинг не менялся - на nic.ru

[celsoft 6 076]

leksey,

Ошибка означает что невозможно открыть канал по данному адресу, причин всего две, либо на вашем сервере были запрещены исходящие внешние подключения к другим серверам, либо сайт источник заблокировал подключения IP вашего сервера. Если это у вас для абсолютно всех каналов, значит подключения были отключены вашим хостинг провайдером.

[red562 0]

Админы ,а как сделать RSS информер что бы выводил новости с изображениями ??? Заголовок новости он выводит описание тоже ,а вот изображения нет как еще чтоб изображение выводило ???

[celsoft 6 076]

red562,

Такой возможности в скрипте нет.

[red562 0]

celsoft,

Жаль конечно.

[alwe 1]

celsoft, а как с форматом Яндекс.Новости?

В частности интересуют:

<yandex:genre> жанр сообщения</yandex:genre>

<enclosure url=...>

[celsoft 6 076]

alwe,

RSS информеры поддерживают только формат RSS 2.0, яндекс новости к данному стандарту не относятся, они используют другой собственны стандарт.

[alwe 1]

Я не про информеры, а про экспорт RSS...

У меня в админке в настройках RSS написано:

Формат экспорта RSS потока

Выберите формат экспорта RSS потока, доступно три варианта:

Простой - выводит только текст новости без форматирования

Полный - выводит весь текст новости с сохранением форматирования и картинок

Яндекс новости - выводит текст в формате необходимом для интеграции сайта в систему Яндекс новости

Однако это не соответствует действительности. Кое-что я подправил в соответствии с тех.требованиями Яндекс.Новости, но вот с

<yandex:genre> жанр сообщения</yandex:genre>

<enclosure url=...>

ничего не выходит... а хотелось бы.

[celsoft 6 076]

Однако это не соответствует действительности. Кое-что я подправил в соответствии с тех.требованиями Яндекс.

что именно не соответствует действительности?

но вот с

<yandex:genre> жанр сообщения</yandex:genre>

<enclosure url=...>

ничего не выходит... а хотелось бы.

откуда вы хотите брать данные для этого? Вообще шаблон для rss находится в файле engine/rss.php

[alwe 1]

что именно не соответствует действительности?

То, что тот формат, который вы указали как "Яндекс Новости" в вашем исполнении таковым не является и не соответствует "Техническим требованиям экспортных данных для размещения на сайте Яндекс.Новости" (http://partner.news.yandex.ru/tech.pdf).

Повторю еще раз:

В админке (DLE) в настройках RSS написано:

Формат экспорта RSS потока

Выберите формат экспорта RSS потока, доступно три варианта:

Простой - выводит только текст новости без форматирования

Полный - выводит весь текст новости с сохранением форматирования и картинок

Яндекс новости - выводит текст в формате необходимом для интеграции сайта в систему Яндекс новости.

Выбираем третий вариант, который у вас называется "Яндекс новости" и якобы "выводит текст в формате необходимом для интеграции сайта в систему Яндекс новости" и получаем от Яндекса ответ, что данная лента RSS не соответствует техтребования, ссылку на которые я дал выше.

Пришлось повозиться с вашим файлом, чтобы хоть как-то привести его в соответствие данному документу, однако некоторые важные вещи мне, как не программисту, сделать не удалось. В частности я не знаю как добавить туда <yandex:genre>жанр сообщения</yandex:genre> и <enclosure url=...>. И на ваш вопрос "откуда вы хотите брать данные для этого?" - отвечаю: "Понятия не имею!". Жанр, не исключаю, может быть как дополнительное поле в форме создания новости и заполняется автором публикации. По картинкам же - вероятно, должен быть какой-нибудь скрипт, изменяющий по-ходу image на enclosure... Вам виднее, вы создатели движка, а не я.

И уж коли вы гарантируете качество, то считаю, должны привести данную функцию (RSS в формате Яндекс.Новости) в соответствие требованиям Я.Н или, по крайней мере, помочь пользователям сделать это самостоятельно - написать, если нужно, скрипт, инструкцию по изменению стандартного файла engine/rss.php чтобы он выдавал реальный RSS поток в формате Я.Н.

Изменено 17 января 2011 пользователем alwe

[celsoft 6 076]

alwe,

Вы не внимательно читаете документ, ссылку на который вы дали, и вам не могли отказать, по причине что сам скрипт не соответствует требованиям, потому как DLE очень частно используется в Яндекс новостях, поэтому у вас и спросили в чем именно он несоответствует. Например читаем тех. требования http://partner.news.yandex.ru/tech.pdf

<yandex:genre> - жанр сообщения. Необязательный элемент. Здесь нужно указать латиницей жанр сообщения: lenta (короткое новостное сообщение, 50-80 символов), message (более развёрнутое новостное сообщение), article (статья), interview (интервью).

Пример: <yandex:genre>article</yandex:genre>

вам немогли отказать из за него, т.к. элемент необязательный

Далее

<enclosure> - элемент для иллюстраций, аудио и видеофайлов. Не является обязательным. В случае, если в сообщении содержится несколько иллюстраций, или иллюстрация и видеофайл, элемент <enclosure> повторяется. Принимаются иллюстрации с шириной не менее 100 и не более 600 пикселов. Если есть несколько вариантов одной иллюстрации, отличающихся размером, то в <enclosure> должен быть указан URL фото наибольшего размера. Иллюстрации должны быть разрешены к индексированию в файле robots.txt. Дополнительную информацию о robots.txt можно посмотреть здесь: http://www.yandex.ru/info/webmaster2.html#robots

Пример: <enclosure url="http://www.rossiyskie-novosti.ru/2003/03/25/yandex.jpg" type="image/jpeg"/>

Для изображений параметр type должен совпадать с тем, что отдаётся по указанному URL.

Тоже не могли отказать, т.к. элемент является необязательным.

И уж коли вы гарантируете качество, то считаю, должны привести данную функцию (RSS в формате Яндекс.Новости) в соответствие требованиям Я.Н или, по крайней мере

Как видите эта функция полностью приведена в соответствие и то что вы указываете не соответствует действительности. Поэтому вас и спросили что не соответствует требованиям, из того же технического документа? Требования и какие то дополнительные теги это вещи абсолютно разные, они ставяться по желанию а не по необходимости. В DLE информации для данных тегов нет, он их и не ставит, и на работу сайта в яндекс новостях это не влияет.

Поэтому либо ваш сайт не соответствовал по другим причинам, либо сотрудник яндекса, проверяющий сайт, сам невнимательно прочитал технические требования яндекса.

[alwe 1]

celsoft, к сожалению, вы сами невнимательно прочитали то, что я написал вам выше...

Я ценю ваше время, потраченное на написанное, но оно было потрачено впустую.

Я не писал, что сайт не приняли из-за отсутствия <yandex:genre> или <enclosure>, я написал, что эти элементы мне очень важны, но я не сумел их заставить работать, т.к. не знаю как это сделать. По моему дилетантскому мнению изменений в engine/rss.php для их работы будет недостаточно.

Я написал, что в чистом виде ваш файл не соответствует техтребованиям ЯН. Когда я года полтора назад подписал с Я.Н партнерский договор и отправил им RSS, которая в админке значится как "Яндекс новости - выводит текст в формате необходимом для интеграции сайта в систему Яндекс новости", из техслужбы Яндекса пришел ответ со списком несоответствий, вот их вручную я попунктно и изменял и только после внесения всех изменений новости с моего сайта допустили в ЯН. Поэтому я и пишу, что ваш файл не соответствует техтребованиям ЯН. То что сайты на DLE сотрудничают с ЯН, не говорит о том, что владельцы этих сайтов не переписывали файл engine/rss.php Попробую порыться в архиве почты и если ответ из Яндекса сохранился приведу его вам здесь. Если вы мне не верите на слово.

[celsoft 6 076]

Я написал, что в чистом виде ваш файл не соответствует техтребованиям ЯН.

Вас поэтому и спросили, что именно не соответствует. То что вы пишите про <yandex:genre> или <enclosure>, не являются техническими требованиями. Вы же пишите именно про несоответствие с требованиями, с этим вопросом я и пытаюсь разобраться и если проблема есть, то решить ее в будущем. Но от вас я так и не увидел никаких несоответствий с требованием тех документации Яндекса.

из техслужбы Яндекса пришел ответ со списком несоответствий, вот их вручную я попунктно и изменял и только после внесения всех изменений новости с моего сайта допустили в ЯН. Поэтому я и пишу, что ваш файл не соответствует техтребованиям ЯН.

Ну так дайте эту информацию, что именно вам указал Яндекс, я от вас и пытаюсь этого добиться. Как можно решить того, не зная чего.

[alwe 1]

Я вам дал ссылку на техтребования ЯН и вы можете сравнить с тем, что у вас на выходе. Ну да ладно...

Одно письмо, первое, нашел... Чтобы все было правильно понято, повторю хронологию: февраль 2009 года, я подписывал партнерское соглашение с Яндекс.Новости и отправил им RSS по третьему типу из настроек DLE: "Яндекс новости - выводит текст в формате необходимом для интеграции сайта в систему Яндекс новости". В ответ получил следующее:

В экспортном файле обнаружены следующие несоответствия нашим техническим требованиям:

- кроме стандартных элементов RSS 2.0, для экспорта Данных используется специальный элемент <yandex:full-text>, который должен содержать полный текст сообщения. Этот элемент является обязательным. Полный текст сообщения необходим для индексирования поисковым роботом и на Яндекс.ру не размещается. В полном тексте не должны содержаться название источника и дата/время сообщения, а также контактная информация и любая другая информация, которая повторяется в каждом сообщении. Кроме того, просим исключать из полного текста все тэги форматирования.

- для иллюстрирования Ваших сообщений необходимо использовать тег <enclosure> - элемент для иллюстраций, аудио и видеофайлов. Принимаются иллюстрации с шириной не менее 100 и не более 600 пикселов. Для изображений параметр type должен совпадать с тем, что отдаётся по указанному URL.

Пример:

<enclosure url="http://www.rossiyskie-novosti.ru/2003/03/25/yandex.jpg" type="image/jpeg"/>

- в теге <description> (для сообщений) дается аннотация сообщения. В Вашем случае, это обязательный элемент, так как Вы иллюстрируете свои новости.

Пример:

<description>Программный продукт Яndex.Site установлен на официальном сайте президента России</description>

- в Яндекс.Новостях также используется входящий в <channel> обязательный элемент <image>, который должен содержать ссылку на графический файл с изображением логотипа издания. Эта ссылка дается во вложенном элементе <url>, название (будет написано в html-атрибуте alt) - в <title> (необходимо еще раз повторить название издания), URL издания - в <link>. Логотип должен быть в формате .gif, без анимации. Размер логотипа – 100 пикселей по максимальной стороне.

Пример:

<image>

<url>http://www.rossiyskie-novosti.ru/logo.gif</url>

<title>Российские новости</title>

<link>http://www.rossiyskie-novosti.ru/</link>

</image>

Когда необходимые изменения будут внесены в Ваш экспортный файл, сообщите нам, пожалуйста, об этом.

Вот что ответила техслужба ЯН на ваш вариант RSS по третьему типу "Яндекс новости - выводит текст в формате необходимом для интеграции сайта в систему Яндекс новости". Пришлось все эти изменения вносить вручную. Затем еще было письмо, с чем-то еще (уже просто не помню да и рыться уже не охота в почте)...

Вывод: заявленная данная функция в DLE 7х не соответствовала (возможно в новых версиях движка файл уже другой, я не знаю) на тот момент действительным требованиям ЯН.

Если у вас возникло ощущение, что я пришел просто облить вас грязью, то это не так. Я уважаю DLE, пользуюсь им уже 2,5 года и не намерен отказываться от его использования. Каковы успехи? Нормально все - выдача отличная, в ЯН часто в ТОПе, благодаря чему посещаемость, к примеру, за последние сутки составила 38,5 тыс. посетителей. Но вот RSS для ЯН нужно доделать. Если кому-то кажется, что <yandex:genre> и <enclosure> - это несущественно, ребята, не соглашусь - очень важные параметры, без которых все сложнее и сложнее пробиваться сквозь плотные ряды новостных монстров-конкурентов. А потому, убедительно прошу создателей DLE озадачиться этим вопросом и довести-таки RSS до ума.

[celsoft 6 076]

- кроме стандартных элементов RSS 2.0, для экспорта Данных используется специальный элемент <yandex:full-text>, который должен содержать полный текст сообщения. Этот элемент является обязательным. Полный текст сообщения необходим для индексирования поисковым роботом и на Яндекс.ру не размещается. В полном тексте не должны содержаться название источника и дата/время сообщения, а также контактная информация и любая другая информация, которая повторяется в каждом сообщении. Кроме того, просим исключать из полного текста все тэги форматирования.

Это в скрипте есть и полностью соответствует.

- в теге <description> (для сообщений) дается аннотация сообщения. В Вашем случае, это обязательный элемент, так как Вы иллюстрируете свои новости.

Пример:

<description>Программный продукт Яndex.Site установлен на официальном сайте президента России</description>

также присутсвует в скрипте

- в Яндекс.Новостях также используется входящий в <channel> обязательный элемент <image>, который должен содержать ссылку на графический файл с изображением логотипа издания. Эта ссылка дается во вложенном элементе <url>, название (будет написано в html-атрибуте alt) - в <title> (необходимо еще раз повторить название издания), URL издания - в <link>. Логотип должен быть в формате .gif, без анимации. Размер логотипа – 100 пикселей по максимальной стороне.

Пример:

<image>

<url>http://www.rossiyskie-novosti.ru/logo.gif</url>

<title>Российские новости</title>

<link>http://www.rossiyskie-novosti.ru/</link>

</image>

также присутствует в скрипте, править ничего не нужно, нужно лишь разместить картинку yandexlogo.gif в корне.

Вывод: заявленная данная функция в DLE 7х не соответствовала (возможно в новых версиях движка файл уже другой, я не знаю) на тот момент действительным требованиям ЯН.

это все было и в версии 7x и вообще всегда. Судя по данным сообщениям вы отсылали на проверку не включив в настройках формат Яндекс новости, т.к. стандартный RSS это и есть стандарт RSS 2.0 о котором вам написала служба поддержки яндекса и который нужно было дополнить.

[alwe 1]

celsoft, вы можете сколько угодно выставлять меня идиотом, не включившим "в настройках" формат, но попробуйте сами отправить свой RSS в ЯН и получите ответ. Без правки ваш engine/rss.php в ЯН не возьмут и все что "есть в скрипте" требует доработки. Больше писать не буду ничего - можете самообманываться и дальше, если вам так нравится.

[celsoft 6 076]

вы можете сколько угодно выставлять меня идиотом

Зачем мне это делать, я лишь читаю ваши сообщения и даю на них ответ. Я же не виноват, что то о чем вы пишите в скрипте есть, и теги эти тоже есть.

но попробуйте сами отправить свой RSS в ЯН и получите ответ

Пробовал и не раз, поймите если вы думаете что только вы этим пользуетесь, то вы заблуждаетесь. Им пользуются очень много людей, а не о соответствии тех требованиям пишите только вы. И я бы с удовольствием исправил бы проблемы о которых вы пишите, это моя работа, но я не могу исправить или добавить то, что присутствует и работает. И если бы я не хотел бы решать данные вопросы, я бы вам вообще ничего не писал в этой теме.

[alwe 1]

вы можете сколько угодно выставлять меня идиотом

Зачем мне это делать, я лишь читаю ваши сообщения и даю на них ответ. Я же не виноват, что то о чем вы пишите в скрипте есть, и теги эти тоже есть.

но попробуйте сами отправить свой RSS в ЯН и получите ответ

Пробовал и не раз, поймите если вы думаете что только вы этим пользуетесь, то вы заблуждаетесь. Им пользуются очень много людей, а не о соответствии тех требованиям пишите только вы. И я бы с удовольствием исправил бы проблемы о которых вы пишите, это моя работа, но я не могу исправить или добавить то, что присутствует и работает. И если бы я не хотел бы решать данные вопросы, я бы вам вообще ничего не писал в этой теме.

В вашем ответе нет ни слова правды. Вы не отправляли RSS в ЯН - уверен на 100%! Еще раз повторю: ваш файл не соответствует техтребованиям ЯН. То что в нем содержится требует ручной правки, в чистом виде ЯН его НЕ ПРИНИМАЕТ! Хотел было прислать вам ваш стандартный файл и исправленный, которым я сейчас пользуюсь, чтобы вы сравнили, убедились и внесли необходимые правки. Однако ваша упертая позиция в этом вопросе меня разочаровала... Самообманывайтесь дальше, если нравится, но людей обманывать не нужно и тем более таким способом. Я вам привел ответ ЯН на ваш файл, докажите обратное, не пустыми словами, мол все работает. В десятый раз вам говорю: не работает.

На сим все... хватит. Я так понимаю, вы из тех, кому чтобы доказать, что вода холодная, мало завести по пояс в воду, вас нужно в нее с головой окунуть и то будете сомневаться: а может она и не холодная вовсе, а недостаточно теплая?

[celsoft 6 076]

В вашем ответе нет ни слова правды.

Я не собираюсь вам ничего доказывать это бессмысленно. Какой смысл спорить, если все достаточно проверить. Вы пишите

- кроме стандартных элементов RSS 2.0, для экспорта Данных используется специальный элемент <yandex:full-text>, который должен содержать полный текст сообщения. Этот элемент является обязательным.

а теперь открываем исходный код потока и видим что тег <yandex:full-text> присутствует.

Далее

- в теге <description> (для сообщений) дается аннотация сообщения. В Вашем случае, это обязательный элемент, так как Вы иллюстрируете свои новости.

Пример:

<description>Программный продукт Яndex.Site установлен на официальном сайте президента России</description>

опять открываем исходный текст RSS потока и видим, что теги присутствуют.

Далее

- в Яндекс.Новостях также используется входящий в <channel> обязательный элемент <image>, который должен содержать ссылку на графический файл с изображением логотипа издания. Эта ссылка дается во вложенном элементе <url>, название (будет написано в html-атрибуте alt) - в <title> (необходимо еще раз повторить название издания), URL издания - в <link>. Логотип должен быть в формате .gif, без анимации. Размер логотипа – 100 пикселей по максимальной стороне.

Пример:

<image>

<url>http://www.rossiyskie-novosti.ru/logo.gif</url>

<title>Российские новости</title>

<link>http://www.rossiyskie-novosti.ru/</link>

</image>

Опять открываем код потока и видим что он присутствует.

Так что спорить с вами и что то доказывать, если теги есть в потоке, то они есть и это может проверить и посмотреть каждый. Поэтому писать, что я вас обманываю это глупо. Так что сомнеюсь или что то доказываю не я, а вы, причем вещи не соответствующие действительности, я лишь констатирую факты. А факты таковы, что все теги о которых вы пишите в потоке есть.

Вы почему то думаете что я вам пытаюсь что то доказать, это не так, я лишь проверяю ваши сообщения о багах, вижу что никаких багов в данном вопросе нет, данные теги присутствует, о которых вы пишите что их нет, и сообщаю об этом, вот и все.

[nihat 0]

Им пользуются очень много людей, а не о соответствии тех требованиям пишите только вы.

У меня такая же проблема. Мне также важно, чтобы <enclosure> был в rss-ленте, потому что если вставить картинку в полную новость в формате html, то он не преобразуется в скрипте в <enclosure>.

А новость без картинки выглядит, сами понимаете, очень скупо.

То, что это проблема не только у alwe, можно убедиться, например, по ссылкам

http://forum.searchengines.ru/archive/index.php/t-493341.html

http://forum.sape.ru/showthread.php?t=27608

Люди безуспешно пытаются решить эту проблему, но не все же программисты ,к счастью.

Надеюсь на действенный ответ тех.поддержки по этому поводу и предпринятые меры.

Спасибо.

[KorrDon 0]

Тот же самый вопрос возник по <enclosure> только не для яндекса а для майл ru . Как же все таки его запустить ?

[Mek 99]

Могу раскрыть вам секрет как сделать чтоб DLE выводил картинки в RSS информере.

engine/modules/rssinform.php

После 127 строки ( if( $value['tmax'] and dle_strlen( $xml->content[$i].......... )

добавляем:

		   	 preg_match_all("|<img src=\"+(.*)/>|U", $xml->content[$i]['description'], $imgdata, PREG_PATTERN_ORDER);

				if(sizeof($imgdata[0])>0)

				{

			   	  $xml->content[$i]['img'] = $imgdata[0][0];

				}

				else

				{

			   	  $xml->content[$i]['img'] = '';

				}

После:

$tpl->set( '{news}', $content['description'] );

Вставляем:

$tpl->set( '{img}', $content['img'] );[/code]

Всё готово!!! Теперь, в шаблон информера (по умолчанию это rssinform.php) вставляем тег {img} и он выводит первую картинку из новости.

Результат можно посмотреть на моём сайте

На главной "Авторская статья" и "Новые документальные фильмы на нашем форуме" выведены через RSS

Изменено 9 декабря 2011 пользователем Mek