Импорт новостей не из РСС

[Vivaldy 0]

Импорт новостей по РСС это конечно хорошо! Но хотелось бы иметь модуль, который умеет брать новости не из РСС, а обычных HTML страниц. Кто сможет помочь? Есть ли готовое решение и какая цена?

[Shinji 0]

Такой модель есть по умолчанию в движке... правда ему для правильной работы таки нужен РСС для отслеживания изменений....

[Vivaldy 0]

В данном случае речь идет не об РСС, а о HTML лентах, не имеющих РСС потока.

[Shinji 0]

Т.е. вы список УРЛ новых новостей будете сами куда-то забивать?

потому что для того что бы грабить новости (и не только) надо как минимум источник этой информации... т.е. линк на страницу (rss нам этот линк дает). Далее для того что бы грабить в массовом порядке, а не по одной странице надо что бы шаблон у всех страниц с которых надо грабить был однотипный...

т.е. на сайте должно быть хотя бы что-то что выдавало бы УРЛ страниц (и идеале + заголовок + дату размещения)... или писать отдельный парсер который этот список будет делать на основе главной страницы (или карты сайта, или списка новостей, или еще чего).

PS: готовое решений для первого - граббинг через список новых урл есть в движке - его быстро переделать, а вот готового решения для второго нет и не будет т.к. для каждого сайта нужен свой подход и т.д. и т.п.

[MAGIK 0]

Может сможет помочь http://page2rss.com/ ?