RSS Grabber null + синонимайзер

RSS Grabber null + синонимайзер


Начиная с версии 3.5 - RSS GRABBER работает по HTML (граббит не только с rss лент)
Граббер умеет грабить c 90% всех существующих DLE сайтов не составляя шаблоны, а так же с любого другого с составлением шаблонов.

P.S. Я его ещё не тестил, просто шарился по инету, нашёл, решил поделиться wink
Модуль собирает новости из выбранных Вами RSS и HTML каналов и публикует их у Вас на сайте.

Модуль работает в 3 этапа:
1. Собирает все новости из выбранного канала, если заданы шаблоны идёт по ссылке на полную новость, если нужно авторизируется и собирает данные.
2. Пользователь выбирает необходимые ему новости и если нужно изменяет.
3. Сохраняет полученные новости в базе при этом если в новостях встречаются картинки и если разрешено в настройках то сливает все картинки на выбранный хостинг изображений или на сервер и закрепляет за новостью.

Работает практически на всех хостингах

измения по сравнению с 3.6.4

[+] Добавлена функция использовать встроенный в граббер парсер
[+] Загрузка на радикал настраивается в глобальных настройках с вожможностоью указать желаемую надпись на изображениях
[+] Добавленно выравнивание картинок для отдельно для короткой и полной новости
[+] Добавленна функция отключения отключения тегов "Генерация тегов"
[+] Добавлена функция перезаписывать новости
[+] Добавлена возможность удалять слова из заголовка новости
[+] Добавленна возможность для канала задать: Символьный код, Облако тегов, Метатег title, Описание для статьи, Ключевые слова
[+] В настройки канала вынесены настройки визуализации отдельной вкладкой
HTML
[+] Для сайтов доноров DLE переделан схема грабинга т.е. теперь "Шаблон короткой новости" заполнять не нужно
Глобальные настройки
[+] Добавлена возможность загружать список прокси серверов
[+] Добавлена возможность использовать модуль "pingationMod"
[+] Добавлена возможность указать кол-во новостей в выпадающем меню

измения по сравнению с 3.6.3

[+] уменьшать теперь можно и оригинал изображения в настройках сайта
[+] добавлен параметр ПРОКСИ если ваш сайт забанили по IP то сайт донора можно грабить через прокси сервер указанный глобальных настройках
[+] добавлены функци с работой корткой и полной новостью:
[+] стирать короткую новость
[+] вставлят изображение из полной новости (включается автоматически при включении функции выше)
[+] делать полную новость из короткой и полной новости
[+] удалять пустые строки
[+] делать текстовые ссылки кликабельными
[+] добавлена возможность использовать другое изображение для водяного знака(например большего размера от того сто по умалчанию)
[+] можно выбрать расположение водяного знака
[+] в настройки канала внесены настройки визуализации из глобальных
[+] можно добавлять дополнительные слова к заголовку новости(к началу и к концу)
[+] при грабинге новостей черз админку добавлен кнопка "Найти похожие новости"
[+] Тэги делаются из названии категории сайта донора и заголовка новости
HTML
[+] Добавленно постраничка (не работает в кроне)
[+] Упращёно составление шаблона т.е. его не надо составлять практически для всех сайтов на DLE
[+] Для шаблона заголовка новости так же упращено практически с любого сайта можно его не составлять

При заходе на страницу может выдать ошибку, не пугайтесь, просто удалите строку 29 в engine/inc/rss.php:
if (ping_post() == true)msg ($lang_grabber['info'],$lang_grabber['info'],'Не законное использования скрипта!!!!!',$PHP_SELF);

rsssinonimaizer.rar [800,96 Kb] (cкачиваний: 1898)
Другие новости по теме:

Категория: Модули » Бесплатные ----- Просмотров: 14324 ----- Комментариев: 48

Вернуться

  • MaD

  • 15 февраля 2010 16:18
  • Группа: User
  • ICQ: 365275250
  • Регистрация: 12.06.2008
  • Комментариев: 71
  • Публикаций: 9
^
спасибо , давно искал

--------------------
  • neoks

  • 15 февраля 2010 16:22
  • Группа: User
  • ICQ: --
  • Регистрация: 20.07.2009
  • Комментариев: 556
  • Публикаций: 121
^
Ша пойдут варезы грабить друг у друга lol

--------------------
  • TheVS

  • 15 февраля 2010 16:30
  • Группа: Гости
  • ICQ: --
  • Регистрация: --
  • Комментариев: 0
  • Публикаций: 0
^
Спасибо, посмотрю для общего развития
  • Pafnuty

  • 15 февраля 2010 17:52
  • Группа: Гости
  • ICQ: --
  • Регистрация: --
  • Комментариев: 0
  • Публикаций: 0
^
Версия 3.6.4.1 наверно?
  • LeFrant

  • 15 февраля 2010 18:06
  • Группа: User
  • ICQ: --
  • Регистрация: 5.07.2009
  • Комментариев: 6
  • Публикаций: 0
^
Pafnuty, угу.
Покупайте лицензию! (3.6.6) smile
  • chylok

  • 15 февраля 2010 18:57
  • Группа: Гости
  • ICQ: --
  • Регистрация: --
  • Комментариев: 0
  • Публикаций: 0
^
Warning: require_once(/home/wertnes2/domains/warez-krut.ru/public_html/grabber/engine/dat
a/config.php): failed to open stream: No such file or directory in /home/wertnes2/domains/warez-krut.ru/public_html/grabber/install.php on line 12 Fatal error: require_once(): Failed opening required '/home/wertnes2/domains/warez-krut.ru/public_html/grabber/engine/data/confi
g.php' (include_path='.:/usr/local/lib/php') in /home/wertnes2/domains/warez-krut.ru/public_html/grabber/install.php on line 12
  • Группа: User
  • ICQ: --
  • Регистрация: 27.03.2009
  • Комментариев: 18
  • Публикаций: 0
^
Cron работает?
  • neoks

  • 15 февраля 2010 19:32
  • Группа: User
  • ICQ: --
  • Регистрация: 20.07.2009
  • Комментариев: 556
  • Публикаций: 121
^
Blaze_56,
Судя по комментарию выше, данный модуль даже не устанавливается.

--------------------
  • neoks

  • 15 февраля 2010 19:45
  • Группа: User
  • ICQ: --
  • Регистрация: 20.07.2009
  • Комментариев: 556
  • Публикаций: 121
^
Dimas-rap,
Ты таблицу sinonims.sql добовлял в базу майсул ?

--------------------
  • Группа: User
  • ICQ: --
  • Регистрация: 16.08.2008
  • Комментариев: 156
  • Публикаций: 2
^
neoks,
да уже добавил :) уже разобрался... но блин серв загружает когда грабит :(
  • neoks

  • 15 февраля 2010 20:05
  • Группа: User
  • ICQ: --
  • Регистрация: 20.07.2009
  • Комментариев: 556
  • Публикаций: 121
^
Цитата: Dimas-rap
но блин серв загружает когда грабит

Я в этом не чуть не сомневался lol

--------------------
  • swart

  • 15 февраля 2010 20:23
  • Группа: Гости
  • ICQ: --
  • Регистрация: --
  • Комментариев: 0
  • Публикаций: 0
^
грузит серв но зато эффект каков ))), спс за граббер.
  • Группа: User
  • ICQ: --
  • Регистрация: 16.08.2008
  • Комментариев: 156
  • Публикаций: 2
^
угу грабер половину постов грабит половину нет :)
еще когда картинки указано по центру грабить в краткой новости не по центру.. и в полной новости картинка непо центру =)
кстати обьясните плиз неграмотному что такое синомайзер и для чего он?:)
  • Группа: User
  • ICQ: 557572849
  • Регистрация: 22.04.2009
  • Комментариев: 62
  • Публикаций: 14
^
Главное что всё работает, остальное в ходе действий:) Честно говоря даже неуспел поставить его, времени нет
  • Walters

  • 15 февраля 2010 20:55
  • Группа: User
  • ICQ: 359656154
  • Регистрация: 19.01.2010
  • Комментариев: 12
  • Публикаций: 0
^
так я не понял стоит ставить или нет?
  • Группа: User
  • ICQ: --
  • Регистрация: 16.08.2008
  • Комментариев: 156
  • Публикаций: 2
^
Walters,
стоит :) теперь бы еще найти варезников нормальных... верней не варезников с софтом.. а с всякими новостями,приколами :) ну типа моего портала)
  • neoks

  • 15 февраля 2010 21:50
  • Группа: User
  • ICQ: --
  • Регистрация: 20.07.2009
  • Комментариев: 556
  • Публикаций: 121
^
Dimas-rap,
Синоменайзер это изменение текста по мере граба контента (после синоменайзера он выглядит более уникальным для поисковиков но почти не читабельным для посетителей сайта.

--------------------
  • Fozzy

  • 15 февраля 2010 22:08
  • Группа: User
  • ICQ: 321610474
  • Регистрация: 7.11.2008
  • Комментариев: 3
  • Публикаций: 0
^
есть проблема, поставил, всё работает, только после того, как "ограбил" какой-то сайт и у меня выводятся овости, я не могу добавить их на сайт. Пишет, добавить на сайт не удалось

--------------------
  • Группа: Гости
  • ICQ: --
  • Регистрация: --
  • Комментариев: 0
  • Публикаций: 0
^
юзаю грабер 3.2 пока хватает)
  • Maxter

  • 16 февраля 2010 04:46
  • Группа: Гости
  • ICQ: --
  • Регистрация: --
  • Комментариев: 0
  • Публикаций: 0
^
Синонимайзер = зло = бан
  • nutbox

  • 16 февраля 2010 07:17
  • Группа: User
  • ICQ: 388044627
  • Регистрация: 24.06.2008
  • Комментариев: 30
  • Публикаций: 0
^
Все реально работает, пользуюсь уже недели две
  • Группа: User
  • ICQ: --
  • Регистрация: 16.08.2008
  • Комментариев: 156
  • Публикаций: 2
^
neoks,
понятно спс :) отключю его нафиг..
  • Группа: Гости
  • ICQ: --
  • Регистрация: --
  • Комментариев: 0
  • Публикаций: 0
^
вылетает
MySQL Error!
------------------------

The Error returned was:
Unknown column 'title' in 'order clause'

Error Number:
1054
SELECT * FROM dle_rss ORDER BY xpos,title ASC


кто подскажет что делать?
  • Группа: Гости
  • ICQ: --
  • Регистрация: --
  • Комментариев: 0
  • Публикаций: 0
^
vipstyle,
Если у кого будет такая же ошибка, подргузите таблицы в БД в ручную.
всё работает!
lucefeel плюсик=)
  • Gazuots

  • 17 февраля 2010 10:33
  • Группа: User
  • ICQ: --
  • Регистрация: 16.10.2009
  • Комментариев: 16
  • Публикаций: 1
^
I can't go to /admin.php?mod=rss, it said permission denied. I imported sql file..

--------------------
  • mnzul

  • 17 февраля 2010 16:34
  • Группа: User
  • ICQ: --
  • Регистрация: 1.07.2008
  • Комментариев: 16
  • Публикаций: 0
^
скрипт не берет ссылки почему то
  • barek

  • 17 февраля 2010 18:06
  • Группа: Гости
  • ICQ: --
  • Регистрация: --
  • Комментариев: 0
  • Публикаций: 0
^
нормальные сайты грабить не получается =(
  • Группа: Гости
  • ICQ: --
  • Регистрация: --
  • Комментариев: 0
  • Публикаций: 0
^
дайте плиз инструкцию по установке в ЛС
  • webb

  • 17 февраля 2010 18:55
  • Группа: Гости
  • ICQ: --
  • Регистрация: --
  • Комментариев: 0
  • Публикаций: 0
^
А в настройках модуля присутствует функция отключения синонимайзера?
  • Группа: Гости
  • ICQ: --
  • Регистрация: --
  • Комментариев: 0
  • Публикаций: 0
^
barek,
всё получается!! =)

AssassinZP,
Запускай install.php там всё по русски=)

webb,
Его всегда можно отключить в ручную
  • DVMade

  • 18 февраля 2010 07:12
  • Группа: Гости
  • ICQ: --
  • Регистрация: --
  • Комментариев: 0
  • Публикаций: 0
^
У меня почему-то коприует тока 9 новостей и всё, почему?((((
  • swart

  • 18 февраля 2010 18:48
  • Группа: Гости
  • ICQ: --
  • Регистрация: --
  • Комментариев: 0
  • Публикаций: 0
^
граббер жеско на сайт влияет сайn часто отваливается во время граббинга
  • qwq

  • 20 февраля 2010 07:53
  • Группа: Гости
  • ICQ: --
  • Регистрация: --
  • Комментариев: 0
  • Публикаций: 0
^
Мне не понравиля! Грабит как-то криво..половина новостей с "полной", половина нет!
Очень требовательный к настройке шаблона. Вообшем "откатился" я на старый, проверенный 3.3.1 И вам рекомендую (имхо конечно) fellow
  • Группа: User
  • ICQ: --
  • Регистрация: 24.04.2008
  • Комментариев: 9
  • Публикаций: 0
^
До первого адекватного админа, у которого в теле новости всегда найдется обратная ссылка, которая укажет вашим посетителям куда нужно идти. Если это не помогает бан IP сайта на котором стоит граббер (это в лучшем случае) и никаких новостей вы больше не получите, а в худшем - письмо Платону с указанием ссылки на информацию о данном граббере в интернете и конкретно на исполняющий файл на вашем сайте, после чего вылет ваших сайтов из Яндекса.

Подобное было с подобным граббером, только не помню какие движки он грабил, то ли форумы, то ли что то другое. На форуме searchengines обсуждалось. В данном случае Яндекс реагировал на наличие граббера одинаково - страницы из индекса вон, сайт из Яндекса вон.

Отследить граббер просто - через инструменты в панели Google

Есть желающие попробовать?
  • USSR12

  • 27 февраля 2010 05:12
  • Группа: Гости
  • ICQ: --
  • Регистрация: --
  • Комментариев: 0
  • Публикаций: 0
^
Блин, грабит не в той кодировке, как исправить?
  • swart

  • 2 марта 2010 10:12
  • Группа: Гости
  • ICQ: --
  • Регистрация: --
  • Комментариев: 0
  • Публикаций: 0
^
_http://www.warezsoft.ru/ классный сайт на дле для грабинга но нифига не грабит(
  • Группа: User
  • ICQ: 9801562
  • Регистрация: 22.09.2008
  • Комментариев: 21
  • Публикаций: 0
^
Ставте 3.1! работает стабильно
  • 1coba1

  • 3 марта 2010 21:24
  • Группа: Гости
  • ICQ: --
  • Регистрация: --
  • Комментариев: 0
  • Публикаций: 0
^
в общем, жуткое дело, грабятся топики новостей, но сам текст - нет, пусто в поле короткой новости и полной
  • Группа: Гости
  • ICQ: --
  • Регистрация: --
  • Комментариев: 0
  • Публикаций: 0
^
Подскажите
Я не смог нормально создать таблицу, подскажите как это зделать пожалусто! smile
  • Braund

  • 16 марта 2010 12:11
  • Группа: User
  • ICQ: 627174818
  • Регистрация: 13.09.2008
  • Комментариев: 33
  • Публикаций: 1
^
Да, Grabber это зло, хуже чем боты, сайт 100% вылетит из Яндекса, а потом и ТИЦ упадет! Так что не юзайте данное г...
  • Группа: User
  • ICQ: --
  • Регистрация: 4.07.2009
  • Комментариев: 7
  • Публикаций: 0
^
Кто то может сказать как можно уменьшить запросы sql ?
  • lut

  • 25 марта 2010 12:48
  • Группа: Гости
  • ICQ: --
  • Регистрация: --
  • Комментариев: 0
  • Публикаций: 0
^
Умню пишет
Проверка работоспособности модуля

# Отключена функция "set_time_limit"! Для корректной работы модуля её необходимо включить!.
где и что надо изменить чтоб раработало?
  • Группа: User
  • ICQ: --
  • Регистрация: 18.03.2010
  • Комментариев: 18
  • Публикаций: 26
^
winked спасибос

--------------------
  • Dimage

  • 12 апреля 2010 23:35
  • Группа: Гости
  • ICQ: --
  • Регистрация: --
  • Комментариев: 0
  • Публикаций: 0
^
кто может помочь с составлением шаблона?

Лс + пиво)
  • rovlati

  • 22 апреля 2010 16:55
  • Группа: Гости
  • ICQ: --
  • Регистрация: --
  • Комментариев: 0
  • Публикаций: 0
^
Как устанавливать и подскажите, что делать sinonims.sql размером 6.1 мб. belay
  • Группа: User
  • ICQ: 208160487
  • Регистрация: 8.10.2009
  • Комментариев: 2
  • Публикаций: 0
^
Дальше устанавливаем синонемайзер. Для этого переходим по ссылке: http://вашсайт.ру/dumper.php ,
прописываем данные пользователя MySQL, заливаем в вашу БД таблицу sinonims.sql.
  • Группа: Гости
  • ICQ: --
  • Регистрация: --
  • Комментариев: 0
  • Публикаций: 0
^
Переехал на выделенный сервер. Модуль установился и глобальные настройки работают, а вот когда добавляю rss-канал и нажимаю сохранить показывает полностью пустую страницу. /admin.php?mod=rss&action=channel&subaction=add
Где искать проблему? В настройках сервера или в правах доступа?
  • laik216

  • 22 февраля 2011 21:25
  • Группа: User
  • ICQ: --
  • Регистрация: 9.10.2009
  • Комментариев: 17
  • Публикаций: 6
^
Кто может помочь настроить за $$$ пишите в ЛС. smile