Lasto Splog Engine получает перечень HTTP и RSS лент под каждую категорию сайта. Скрипт обходит URL страниц, которые указаны в пермассылках данных лент и находит на страницах тексты, пригодные для парсинга.
Список интересующих документов может быть задан в программе напрямую.
Достоинства программы
1. Самостоятельность.
Программе не требуются шаблоны или сигнатуры ресурсов. В связи с тем, что web-сайт, с которого будет выполнен парсинг текстов, известен заранее, нет необходимости задавать формальные требования импорта для конкретного web-сайта. С другой стороны тут есть и недостаток: не известно заранее, насколько именно импортированная часть текста будет интересна пользователям.
2. Программа является имитатором человеческой деятельности.
В программе могут быть заданы любые правила по запрещению постинга в определенное время. Это весьма разумно в таких ситуациях:
• "по ночам администратор web-сайта спит и ничего не размещает";
• "администратор отдыхает в выходные дни";
• "по понедельникам администратору свойственно плохое самочувствие ";
• "по пятницам администратор идет в бар, завершая работу пораньше".
Есть информация, что ПС выполняют анализ периодичности наполнения сайта. Неестественность наполнения может поставить сайт под угрозу применения фильтров.
3. Случайное распределение всех процессов.
Дело в том, что если какое-то действие выполняется точно по расписанию, это может “засветить” деятельность программы. Ведь живой человек никогда не выполняет работу точно в одно и то же время. По этой причине этот парсер публикует посты на сайте в разные моменты. Это решает ту же задачу – снимается риск попадания сайта под фильтры ПС.
4. Случайное распределение контента.
Полученный контент прогоняется через синонимайзер. База синонимов может дополняться пользователем программы. Качество случайного распределения зависит именно от базы синонимов.
5. Большое количество источников контента.
Каждому разделу сайта может быть задан свой список лент RSS. Кроме того, может быть задан перечень лент HTTP и готовая подборка URLов страниц. Все они принадлежат ресурсам одной тематики. Количество разделов, как и лент неограниченно.
6. В кроне нет никакой необходимости.
Крон всегда может использоваться на любом web-сайте (не только сайте с Lasto Splog). Но при использовании программы крон не является обязательным.
7. Поддержка CMS LastoBlog-B.
LastoBlog-B фактически является модулем расширения к Lasto Blog. При добавлении к программе модуля сплога не происходит потери ни одной его исходной функции.
8. Полная автономность.
Необходимости в утверждении постов администратором нет. Программа работает в полностью автономном режиме. В то же время предусмотрен сервис одобрения статей, которые предназначены для публикации. Пользователь может его использовать, отвергая либо утверждая те статьи, которые программа подготовила к публикации. Lasto Splog высылает уведомления о готовящемся размещении поста на e-mail пользователя.

• 3893 просмотра