Твой софтовый форум > Software > Софт вопросы

Сборщик новостей с сайтов

,

не RSS

Дата публикации: 17.06.2009 - 10:06
middleman
Всем вопрос на засыпку smile.gif
Нужна программка сборщик новостей с сайтов. Не RSS ридер, а обработчик HTML кода.

Функциональность следующая на примере нашего форума:

Прога через заданый промежуток времени заходит по ссылке
Code
http://softoroom.org/ipb.html?act=search&CODE=getnew
с заданым логином и паролем.
Потом с полученой страницы выбирает код по заданому шаблону.
Например текст всех ссылок вида
Code
http://softoroom.org/topic*.html?view=getnewpost
делает заголовком новости, при клике на котором в отдельном поле открывается загруженый заранее весь код находящийся на странице между блоками
Code
<!-- THE POST * -->
       <div class="postcolor">
и заканчивая
Code
</div>
       
       <!-- THE POST -->
и после этого код между блоками
Code
<img src='https://softoroom.org/style_images/1/stat_sql.gif' border='0' style='vertical-align:middle' />
и
Code
sql-запр.</a>


Все что здесь в блоках CODE должно прописываться вручную в настройках программы отдельно для каждого сайта.
При этом прога должна уметь исключать повторяющиеся записи и иметь список исключений отдельно для каждого сайта, чтобы код соответствующий заданым шаблонам, но включенный в этот список не обрабатывался.
scorpio
Ресурсонаполнитель-коллектор? )
middleman
Не. Чисто для себя почитать, хотя это мысль smile.gif
возможность работы с SQL базой приветствуется smile.gif
Вообще просто пришла вот такая идея из серии а хорошо бы было если бы....


Для просмотра полной версии этой страницы, пожалуйста, пройдите по ссылке: Сборщик новостей с сайтов
SoftoRooM © 2004-2024