Грабберы для DLE, uCoz, Joomla, WordPress

grabber v2.6 с синонемайзером

katrik — Thu, 14 Oct 2010 14:47:01 GMT

Многофункциональный граббер для dle. В нем только самые нужны модули. Сам граббер полностью на ajax. Установка: Залить папку с граббером в корень сайта, после запустить файл /граббер/install.php, после переходите по аресу /граббер/index.php и юзайте на здоровье. Граббер полностью бесплатный!

Что есть в нем:

Общие
Загружает прикрепленные файлы
Не добавлять на главную (ДА/НЕТ)
В модерацию (ДА/НЕТ)
Проверка новость на существование
Делает задержку перед скачиванием полного поста
Брать тэги новости (ДА/НЕТ)
Присоединить короткую новость к полной (ДА/НЕТ)
Автор новостей (вводить через запятую имена)
Задержка в секундах между граббингом страниц

Синонимизация
Теперь есть выбор, что синомизировать:
Заголовок новости
Короткое содержание
Полное содержание

Ссылки
Личить ссылки
Хайдить ссылки

Мультимедиа
Загружать музыку (ДА/НЕТ)
Загружать видео (ДА/НЕТ)

Работа с изображениями
Загружать картинки (ДА/НЕТ)
Накладывать водяной знак (ДА/НЕТ)
Делать превью, если изображение слишком большое (ДА/НЕТ)
Исправлена загрузка картинок.

Авторизация на сайте донора.
Логи сграббленных сайтов.

Что нового:
- Немного оптимизировано потребление памяти
- Теперь можно личить ссылки
- И закрывать их в хайд

Нужны расширения: GD2, mb_string, DOMDocument
Желательно расширение: cURL

Сборка by Dle Katrik Group v 1.0 - Warez Site

katrik — Tue, 08 Jun 2010 10:21:02 GMT

Новая сборка DLE 8.3 by katrik для варезного сайта или портала. Все лишнее и не нужное из сборки удалено, имеется только 1 красивый чищенный дизайн для варезного сайта, при установке создаются варезные категории, установил дополнительные модули и хаки и активировал лецензию.
Список установленных модулей и хакков:
-Прямые ссылки с файлообменников 2.2

-Новый быстры рабочий граббер

-Постоянная ссылка на материал

И вот дизайн который есть в сборке:

Бонус - 4000 варезных материалов

DataLife Engine v.8.5 Nulled by Dle Katrik Group

katrik — Tue, 08 Jun 2010 10:18:08 GMT

Были подготовлены и реализованы следующие изменения:

1. Добавлена возможность указывать в настройках групп пользователей, категории, в которые им разрешено добавлять в новости. В случае установления этих ограничений в настройках групп, пользователи смогут добавлять новости только в назначенные категории, и ни в какие другие. При этом при добавлении будет доступен только список разрешенных категорий.

2. В настройки скрипта добавлена возможность включать или отключать автоматический парсинг ссылок в тексте новостей. При включении данной возможности, все текстовые ссылки начинающиеся с http://, будут автоматически преобразованы в кликабельные ссылки.

3. Добавлена корректная обработка тега PAGEBREAK в статических страницах, при выводе результатов поиска по статическим страницам.

4. В настройки скрипта добавлена возможность устанавливать минимальное количество символов в комментарии, тем самым вы можете ограничить потенциальный флуд в комментариях, и исключить в комментариях малозначимые фразы, например "Спасибо" или "+1" и т.д.

5. Добавлена поддержка скриптом поддержка проигрывания на сайте контейнера MKV в формате видео H.264/AAC. Тем самым вы можете размещать на сайте видео высокой четкости вплоть до разрешений Full HD, требуя при этом на 20% меньше трафика, по сравнению с обычными форматами воспроизведения видео, а также вы можете добавлять видео содержащее звук 5.1, несколько языковых звуковых дорожек, а также субтитры.

6. В настройки скрипта добавлена возможность, указания для загружаемых изображений, по какой стороне по умолчанию проводить создание уменьшенной копии. Вы можете указать: "По наибольшей стороне", "По ширине" или "По высоте".

7. Добавлена возможность указывать для рекламных материалов на сайте время начала и время окончания показа баннеров. Данные параметры являются необязательными, и в случае если данные параметры не указаны, то баннер будет показываться неограниченное количество времени. Также вы можете по отдельности указывать, как только дату начала показа, так и только дату окончания показа.

8. Изменен принцип включения режима "галереи" при показе уменьшенных картинок, данный режим теперь включается только при просмотре полных новостей, чтобы объединять показ галереи только в пределах одной новости, и не включается при выводе кратких новостей.

9. Настройки наложения водяного знака на видео были перенесены из настроек скрипта в настройки видеоплееров.

10. В настройки групп добавлена возможность разрешения или запрещения для группы изменять параметры загрузки картинок на сервер. Вы можете разрешить для группы возможность изменять при загрузке размеры уменьшенных копий, наложение водяного знака и т.д. Ранее такая возможность была доступна только стандартным группам не ниже статуса "Журналиста".

11. В антивирус добавлен контроль изменений в javascript файлах. В случае если вы делаете снимок системы, в данный снимок вносятся также и все JS файлы, и в случае появления в них изменений, антивирус сообщит вам о их наличии.

12. Добавлено Gzip сжатие javascript файлов, при включении данной возможности в настройках скрипта, все JS файлы скрипта сжимаются в gzip архивы и кешируются на сервере. Данная возможность позволяет до 70% уменьшить размер файлов и соответственно существенно ускорить загрузку веб страницы в браузер. Также вы можете использовать gzip сжатие и для CSS вашего шаблона, позднее, после релиза, мы опубликуем статью как это сделать. Данная возможность доступна только для PHP 5.1 и выше, если версия вашего PHP ниже, то данная возможность автоматически отключается.

13. В целях безопасности, убрана возможность скачивать файлы бекапов БД с админпанели скрипта, скачать бекапы после создания возможно только по FTP, из папки /backup/

14. Добавлена возможность массового выбора комментариев для их удаления непосредственно на сайте. Вы можете одновременно выбрать на странице несколько комментариев и их удалить. Для выбора комментариев в шаблоне comments.tpl используется тег {mass-action}, а оформление меню выбора действия выполняется классом .mass_comments_action. Массовые действия над комментариями разрешены только группам, которым в настройках разрешено удалять все комментарии.

15. В админпанели скрипта добавлена возможность редактирования и удаления всех комментариев. Ранее возможность редактирования новостей была только для определенной новости.

16. Добавлена возможность в админпанели скрипта, при добавлении или редактировании новостей, редактировать и удалять найденные похожие новости.

17. Добавлена возможность просматривать в админпанели результаты голосований на сайте.

18. В связи с тем что многие администраторы необдуманно дают возможность добавления новостей в админпанели для мало известных им людей, разрешение или запрет в настройках групп, на использование в новостях HTML, также распространяется и при добавлении новостей с админпанели. Хотя мы настоятельно рекомендуем не давать доступ в админпанели для всех подряд, кто это просит.

19. Добавлена возможность для голосований на сайте устанавливать дату начала голосования и дату окончания голосования. При этом если данные параметры установлены, то голосование будет начинаться и автоматически заканчиваться в указанное время. Если они не установлены, то голосование будет показываться независимо от даты до тех пор пока оно не будет оставлено вручную в админпанели.

20. Для шаблона main.tpl добавлен новый тег [static=имя страницы] текст [/static], который выводит текст указанный в данном теге при просмотре указанной статической страницы. Также добавлен противоположный ему тег [not-static=имя страницы] текст [/not-static], который выводит текст везде, кроме указанной таблице. Допускается также использовать в данных тегов имена нескольких страниц, для этого имена статических страниц необходимо перечислять через запятую.

21. Добавлена поддержка регистрации пользователей с E-mail адресами, находящихся в однобуквенных доменах второго уровня. Таких почтовых доменов пока один http://i.ua

22. Добавлена поддержка кода безопасности (CAPTCHA) при использовании на сайте безопасного SSL (https://) протокола.

23. Добавлено кеширование таких разделов как: просмотр всех новостей пользователя и просмотр новостей по ключевому слову из облака тегов. Что ведет к снижению нагрузки на MySQL сервер.

24. Внесены изменения в алгоритмы формирования кеша скрипта, в результате которых были решены проблемы с одновременным использованием каталога на разных языках, например русские буквы и английские, а также с формированием тега custom, содержащего большие списки категорий.

25. Для дополнительных полей новостей добавлено использование редакторов при написании в них информации, что делает добавление информации в данные поля более быстрым и удобным. В зависимости от настроек скрипта, для дополнительных полей включаются BB редактор, либо WYSIWYG редактор. А также поле полной новости в админпанели скрипта, получило свою отдельную панель BB редактора.

26. В список массовых действия при редактировании новостей, добавлена возможность проводить очистку ключевых слов для облака тегов у выбранных новостей.

27. При просмотре списка новостей при их редактировании, в случае если к новости был добавлен опрос, то добавлен вывод соответствующей информационной пиктограммы, что облегчает идентификацию новостей у которых существует опрос.

28. В настройки скрипта добавлена возможность указывать тип графического оформления увеличенного изображения из уменьшенной копии. Допускается выбор четырех типов: С закругленными краями и тенью, c прямыми краями и тенью, только тень, только рамка без тени. Для каждого типа допускается переназначение вида в CSS шаблона.

29. Добавлена возможность принудительно переключения на мобильную версию сайта. Для этого вам необходимо разместить в вашем шаблоне ссылку http://site.ru/index.php?action=mobile Данная возможность предназначена для того чтобы пользователи, заходящие на ваш сайт с мобильного телефона могли свободно переключаться между полной и мобильной версией сайта по желанию. А также пользователи желающие экономить свой трафик могли переключаться на мобильную версию используя при этом обычный компьютер и браузер.

30. Добавлена поддержка зафиксированных новостей при выводе новостей с использованием тега custom. Если новости зафиксированы в этих категориях, то и при выводе их с использованием тега custom, они также будут первыми.

31. Добавлена поддержка RSS информеров в статических страницах. Вы можете добавлять теги информаров, как в текст статической страницы, так и в файлы шаблонов статических страниц.

32. Добавлена поддержка рекламы, из модуля управления рекламными материалами, в статических страницах. Вы можете добавлять теги баннеров, как в текст статической страницы, так и в файлы шаблонов статических страниц.

33. Переработаны механизмы создания карты сайта для поисковых систем Google и Яндекса, в результате чего добавлена поддержка создания карт сайта, содержащих более 50 000 новостей. Если на сайте опубликовано более 50 000 новостей, то карта будет разбита на несколько файлов и создан индексный файл для карт.

34. Добавлена возможность устанавливать снятие новости с публикации на главной странице по истечении срока действия публикации новости, также добавлена возможность снятия фиксации новости, по истечении указанного периода.

35. Добавлена поддержка подсветки строк в списке редактирования новостей, статических страниц и пользователей, скрипт подсвечивает строки на которых находится курсор мышки, что облегчает навигацию и ориентацию в списке при редактировании большого количества элементов в списке.

36. Внесены многочисленные оптимизации в исходный код административной панели, обеспечивающие одинаковое отображение панели в различных браузерах.

37. Исправлена проблема при которой не отображались дополнительные поля профилей пользователей при просмотре списка последних комментариев.

38. Исправлена проблема при которой неверно учитывались результаты опроса в новостях, при большом количестве вариантов ответов и голосований.

39. Исправлена проблема при которой происходило аварийное завершение скрипта, если при редактировании пользователя его E-mail менялся на уже существующий у другого пользователя.

40. Исправлена проблема при которой неверно конвертировались кавычки в доп. полях профиля и они автоматически конвертировались в HTML сущности при повторном редактировании.

41. Исправлена проблема в браузере Опера с автоматической функцией транслитерации латинских букв в кириллицу, используемой в BB редакторе.

42. Исправлена проблема с некорректной транслитерацией имен файлов содержащих в названии кириллицу при массовой загрузке их на сервер.

DataLife Engine v.8.3 Nulled by Dle Katrik Group

katrik — Tue, 08 Jun 2010 10:15:26 GMT

Были подготовлены и реализованы следующие изменения:

1. Добавлен новый плеер для проигрывания flv видеофильмов. Новый плеер обладает рядом преимуществ по сравнению со старым, а именно: Уменьшенный в два раза вес самого плеера, что существенно ускоряет его загрузку в браузер, новый плеер обладает улучшенной прогрессивной загрузкой видео, что улучшает качество воспроизведения видео на относительно медленном интернет соединении, а также добавлена поддержка проигрывания новых форматов файлов с расширением mov, 3gp, f4v.

2. Добавлена возможность для посетителей сайта подписываться на комментарии к определенным новостям. Для этого пользователю при добавлении комментария к новости необходимо выбрать соответствующую галочку и в случае, если к новости будут добавлены другие комментарии, то он получит соответствующее уведомление на E-mail. Включение или отключение данного модуля производиться в настройках скрипта, а также в настройках групп вы можете установить, для каких групп пользователей разрешена подписка на комментарии к новостям.

3. Администратор имеет возможность отписать всех пользователей от всех новостей, для этого предусмотрена соответствующая кнопка на главной странице в админпанели. Также пользователь может самостоятельно отписать самого себя от всех новостей, для этого ему необходимо в своем профиле на сайте выбрать соответствующее действие.

4. Добавлена возможность при подключении сторонних модулей в шаблонах сайта передавать в качестве параметра к модулям результаты выполнения шаблонных тегов скрипта. Например при добавлении в шаблон полной новости конструкции {include file="engine/modules/mymod.php?param={news-id}"}, вы можете передавать вашему стороннему модулю в качестве параметра ID новости и т.д. Вниманию разработчиков: Передаваемые в скрипт параметры, это GET параметры, соответственно при выборе передаваемых тегов вы должны учитывать ограчения GET строки, другими словами вы не можете передать в качестве параметра содержимое полной новости к примеру.

5. В фильтр слов добавлена возможность выбора действия, в случае нахождения слова в добавляемом тексте. Вы можете выбрать действие при котором слово, находящиеся в тексте, будет заменяться на указанное, а можете выбрать действие, при котором добавление текста полностью отклоняться, и новость или комментарий не будут добавлены на сайт, а пользователю будет выведено соответствующее уведомление о том что его текст содержит недопустимые к публикации слова.

6. Для дополнительных полей профилей пользователей, добавлен новый тип поля "Список (select)", что позволяет выбирать посетителями дополнительную информацию о своем профиле из определенного списка. Например выбирать свой пол и т.д.

7. Добавлена поддержка подключения сторонних модулей не только в стандартных файлах шаблона, но и в сторонних файлах шаблона, которые вы подключаете в основные файлы. Например: в шаблоне main.tpl вы можете подключить сторонний шаблон {include file="mytemplate.tpl"}, а в стороннем файле шаблона использовать подключение сторонних модулей {include file="engine/modules/mymod.php"}.

8. Добавлена поддержка режима "галереи" при показе удаленных изображений, опубликованных в теге [img], которые были автоматически уменьшены согласно настроек скрипта.

9. Добавлен вывод аннотаций и описаний при увеличении уменьшенных удаленных изображений опубликованных в теге [img]. Вывод аннотаций осуществляется аналогичным образом, как и для загруженных изображений в теге [thumb].

10. Добавлена полная поддержка линейки PHP версии 5.3.x и выше, устаревшие PHP функции, которые больше не поддерживаются новыми версиями PHP, были заменены на аналогичные актуальные функции.

11. Добавлен вывод ключевых слов из облака тегов для новости, при просмотре новостей находящихся в закладках у посетителя. А также добавлен вывод в этих новостях даты редактирования и причин редактирования, если таковые данные имеются.

12. В админпанели добавлен новый раздел настройки видеопроигрывателей используемых на сайте. В данном разделе вы можете настроить размеры плееров, а также настроить цветовое оформление флеш плеера, предназначенного для проигрывания flv и mp4 формата

13. Добавлен новый плеер для проигрывания mp3 аудиофайлов, для данного плеера также действуют цветовые настройки, которые были установлены для видеопроигрывателя.

14. В настройки скрипта для более удобного визуального восприятия добавлено отображение текущего времени сервера с учетом коррекции при указании настроек коррекции временных зон.

15. Добавлена поддержка мультикатегорий при обработке тега [category=x] текст [/category] и просмотре полной новости. Если новость опубликована в нескольких категориях одновременно, то при проверке тега [category=x] текст [/category] будут учтены все категории новости, а не только первая категория по списку как ранее.

16. В логику шаблона addcomments.tpl внесены изменения облегчающие создание этого шаблона. Добавлен новый тег {editor} который выводит полностью редактор BBCODES или WYSIWYG соответственно настройкам скрипта. Для оформления BBCODES редактора введен класс. Соответственно из шаблона убрана обработка тегов {wysiwyg}, {bbcode}, [not-wysywyg], {text}.

17. Аналогично комментариям, для персональных сообщений (шаблон pm.tpl), также введено использование тега {editor} для вывода редактора, при помощи которого будет производиться написание персональных сообщений.

18. В настройки групп добавлена возможность указывать для размеров аватара не только максимальную величину какой либо из сторон, но и указаывать непосредственно ширину и высоту загружаемого аватара, например 100x100 при этом аватар при загрузке будет пропорционально обрезан непосредственно под укаазаные размеры сторон.

19. Добавлена возможность при восстановлении пароля с сайта осуществлять сброс блокировки по IP. Ранее блокировка по IP снималась одновременно вместе с восстановлением и сбросом пароля. Теперь же при восстановлении пароля на E-mail приходит две ссылки: одна на восстановление пароля, другая на сброс блокировки по IP, установленной в настройках профиля и для сброса блокировки, больше не нужно одновременно с этим сбрасывать пароль.

20. После восстановления и генерации посетителем нового пароля на сайте добавлена отправка пользователю E-Mail сообщения содержащего его новые данные: логин и новый пароль. Теперь посетителю необязательно сразу куда-либо копировать сложный пароль или запоминать его.

21. Убран вывод выбора сортировки новости при просмотре профиля пользователя.

22. В настройки скрипта добавлена возможность включения или отключения объединения комментариев от одного пользователя, добавляемых пользователем к одной новости друг за другом.

23. Добавлена возможность удаления пользователя непосредственно при редактировании его данных, тем самым для того чтобы удалить пользователя вам нет необходимости заходить в раздел редактирования пользователей, и вы можете его удалить, вызвав его профиль из любого раздела сайта, где это предусмотрено.

24. Добавлена возможность, при отправке сообщений через обратную связь, отправлять также и текст, содержащий HTML теги, ранее скрипт автоматически удалял любой HTML. Форматирование текста при этом не осуществляется и сообщение находится в обычном текстовом формате, поэтому данное нововведение будет полезно в том случае если посетители сайта сообщают о каких либо проблемах и необходимо описать например HTML.

25. При редактировании новостей в админпанели скрипта, добавлена возможность поиска новостей, не принадлежащих ни одной категории.

26. В настройки групп добавлена возможность разрешения или запрета использования HTML кода при добавлении новостей с сайта. Несмотря на то, что скрипт не допускает появления в новостей зловредного кода, многие владельцы сайтов не хотят видеть в оформлении новостей HTML код. В случае запрета пользователи могут оформлять новости исключительно с использованием BB тегов, а все форматирование, сделанное при помощи HTML, будет удалено.

27. Добавлена возможность задавать разное оформление при выводе имени группы пользователя. Для этого в настройках групп добавлен префикс и суффикс имени группы, которые будут выводиться до и после имени группы соответственно. Для данный настроек разрешено использование HTML кода для задания форматирования.

28. Добавлена поддержка новых правил форматирования для RSS "Яндекс новости", согласно новым правилам, форматирование полной новости для тега yandex:full-text, больше не удаляется, а лишь корректно экранируется.

29. В шаблоны краткой и полной новости добавлен новый тег [day-news] текст [/day-news], который выводит ссылку на все новости, опубликованные в тот же день что и данная новость. Данный тег например можно использовать совместно с тегом {date}.

30. Добавлена поддержка пользовательской сортировки новостей, при просмотре пользователем своих закладок.

31. Добавлена поддержка тегов {date}, {date=формат даты}, {views} при поиске в статических страницах и выводе результатов этого поиска.

32. Добавлена проверка на добавление дублирующихся имен для статических страниц, а также автоматическая транслитерация имени статической страницы, что исключает добавление страницы с неверным или не поддерживаемым именем.

33. При создании бекапа базы данных из админпанели добавлено добавление к сформированному имени файла бекапа уникального префикса, что делает невозможность поиска методом перебора файлов с резервными копиями БД в папке, где они расположены.

34. При обновлении карты сайта для поисковых систем Google и Яндекс, добавлено также обновление и даты редактирования новостей, вместо даты создания новости. Ранее дата изменялась только в случае была изменена дата новости. А также добавлена ссылка на автоматические уведомление поисковой системы Google о наличии новой версии карты сайта.

35. Обновлен до актуальной версии WYSIWYG редактор список изменений на: http://tinymce.moxiecode.com/js/tinymce/changelog.txt.

36. Исправлена проблема при которой, при удалении новости, она не удалялась из закладок пользователя, в результате чего данная информация излишне накапливалась в БД.

37. Исправлена ошибка при которой неверно обрабатывался тег [code] при редактировании новости, если включен редактор BBCODES и отключен автоматический перенос строк.

38. Исправлена проблема с использованием тега {%user%} при использовании его в массовой рассылке сообщений, при которой скрипт обращался к посетителем с использованием одного имени.

39. Исправлена проблема с публикацией кавычек при добавлении описаний к уменьшенным копиям изображений.

40. Исправлена проблема с невозможностью редактировать пользователя при редактировании новостей, если логин состоит из русских символов.

41. Исправлена проблема некорректного автоматического формирования ключевых слов для метатегов, в случае если текст подвергся типографской обработке.

42. Исправлены обнаруженные и заявленные ранее небольшие ошибки в скрипте.

Сайт создателя

Grabber dle(NEW!)

katrik — Tue, 08 Jun 2010 10:06:18 GMT

Новенький граббер для dle, подходит для всех версий datalife engine. Этот парсер для dle умеет граббить картинки, позволяет поставить префикс к названию материала(например "скачать бесплатно имя материала"), граббер многопоточный, то есть нужно только наставлять ссылок на категории и он каждую категории будет парсить по очереди, можно поставить тайм аут(если у Вас слабенький сервер). Этот граббер не нуждается в настройке, папку grab стоит только загрузить в корень сайта, и потом запустить граббер по адресу http://site.com/grab/index.php. Удачного парсинга!

Отчёт!

katrik — Fri, 23 Apr 2010 04:01:56 GMT

1. Не работают грабберы для uCoz, при использовании граббера моментально бан сайту от робота uCoz, дело в том что идет борьба с дорвеями, и граббера нагружают слишком сервер!
2. Не работают парсеры с tubes т.к. на тубах поменяли ссылки на видео и картинки, зашифровали это всё дело, теперь не по копировать!
Остальное всё работает!

Грабберы для wordpress

katrik — Sat, 06 Mar 2010 09:20:21 GMT

Вот результат моих 2х месячных поисков. Сборник !!!избранных!!! грабберов контента для Вордпресса (аккуратно разбитых по разных вариантах, т.е. в папке с названием плагина лежит по несколько вариантов плагина). Некоторые из них тестировал. В сборник вошли:
* AutoBlogged
* FeedWordpress
* WP Article Import Plugin
* WP Import
* WP Robot
* WP Rss Grabber
* WP-o-Matic

Bonus:
* Clear Duplicate Posts

Граббер для Dle

katrik — Sat, 06 Mar 2010 09:10:29 GMT

Новенький граббер для dle с новыми функциями:
Загрузка изображений на сервер
Накладывать водные знаки
Возможность Выбрать случайного автора новостей из БД
Возможность удаления повторных новостей
Возможность граббить с авторизацией
Источник: http://grabber.3dn.ru
Стоимость: 50 рублей
ICQ: 444442414

VaLaR Grabber

katrik — Sat, 06 Mar 2010 09:05:28 GMT

[*] Скрипт является самостоятельной системой.
Он легко устанавливается и конфигурируется.

[*] Универсальность.
Граббер позволяет получать контент с большинства DLE-сайтов (не используя RSS), а полученный контент
можно использовать на любом сайте, независимо от того, базируется он на популярной CMS или на самописном скрипте.
Данную систему можно научить парсить новости с любого сайта, обладая начальными навыками PHP и HTML.

[*] Гибкость - два режима работы.
>>Классический режим:
В этом режиме дистрибутив граббера копируется непосредственно на Ваш сайт.
Все что нужно - указать тип используемой CMS.
Полученные новости, после их подтверждения, автоматически размещаются у Вас на сайте.

>>Пакетный режим:
Суть режима заключается в разделении процесса получения новостей от их добавления.
Грабить новости вы можете на своем локальном сервере (для пользователей Windows отлично подойдет набор denwer),
скрипт в этом режиме будет формировать специальные пакеты (.php файлы), которые, впоследствии, копируются на Ваш сайт, где другая копия граббера их обрабатывает.
Преимущества данного режима:

[*]Возможность грабить большое количество статей одновременно, если этого не позволяет делать Ваш хостинг;
[*]Если вы грабите долгое время с одного сайта, рано или поздно, Ваш IP на этом сайте может быть просто забанен,
а если грабить с локального сервера - тут Вам на помощь прокси и/или динамический IP.

[*] Функциональность.
]
[*]Поддержка авторизаций на сайте-источнике для получения элементов, недоступных гостям;
[*]Поддержка мультиграббинга (одновременное использование одной копии граббера для работы с множеством источников)
[*]Возможность получения новостей определенной категории или всех новостей, публекуемых на главной странице;
[*]Возможность ограничения количества одновременных запросов с указанием интервала для паузы;*
[*]Возможность добавления "случайных" дат при размещении новостей на Вашем сайте (перемешивание новостей);
[*]Возможность проверки новости на уникальность перед добавлением;
[*]Возможность поэтапного добавления новостей на Ваш сайт;
[*]Возможность автоматического определения категории новости по её содержимому (с помощью шаблонов);
[*]Возможность автоматического добавления "подписей" в новости, где можно указать сайт, например, сайт-источник или ключевые слова;
[*]Возможность цензурирования новостей (замены или удаления текста по точным совпадениям или шаблонам);
[*]Возможность "чистки" HTML-кода новости (начиная от удаления html-комментариев, заканчивая удалением ненужных конструкций);
[*]Возможность синонимизации текста (в дистрибутив входят две открытые базы синонимов);
[*]Возможность синонимизации текста с помощью Google Translate;
[*]Возможность добавления (в том числе и загрузки на сервер в двух режимах) потоковых видео (IMDb) с замещением flash-проигрывателя;
[*]Возможность загрузки картинок на сервер (с возможностью сортировки в разные папки по дате, титулу...);
[*]Возможность наложения водяных знаков на загружаемые картинки;
[*]Возможность расшифровки DLE ссылок (./engine/go.php);
[*]Возможность использования прокси-сервера для соединения с сайтом-источником;

[*]Возможность адаптирования скрипта под сайты, которые имеют нестандартную HTML-структуру;
[*]Возможность сохранения списка последних спарсенных сайтов;
[*]Возможность уменьшения картинок на уровне самих файлов или HTML-кода;
[*]Возможность добавления новостей от случайного автора из списка; появится в новой версии
[*]Возможность добавления meta-данных (ключевых слов и описание) в следующих режимах: появится в новой версии
   а) парсинг непосредственно с сайта-источника;
   б) с помощью автоматической системы получения ключевых слов через анализ контента;
   в) по собственным шаблонам;
[*]Наличие универсального модуля загрузки файлов: он может использоваться для загрузки любого типа файлов (будь-то .swf flash-ролики и/или .rar архивы)
[*]Наличие встроенного редактора новостей;
[*]Наличие встроенного онлайн синонимизатора (для проверки баз);
[*]Наличие универсального конвертора формата текстовых баз синонимов;
А также многое другое...
]
* - На некоторых DLE (да и не только) сайтах стоит анти-спам защита (ограничение количества обращений с одного IP в период времени). Данный скрипт имеет опцию ограничения количества одновременных запросов с указанием интервала для паузы. Что, конечно, увеличивает время граббинга, но все же оставляет его автоматизированным даже на сайтах с анти-спам защитой.
Данная опция также может быть полезна, если на Вашем хостинге отключена стандартная функция снятия ограничения времени выполнения скрипта.
(на большинстве серверов она по понятным причинам как раз отключена). В этом случае, обычно, вылетает ошибка 403 (Forbidden).

[*] Оптимизация.
Работа с граббером максимально нацелена на оптимизацию. Все конфиги расположены в отдельной директории и максимально документированы. С моей стороны гарантируется помощь в настройки системы.

[*] Надеждый механизм работы.
Весь полученный контент хранится в директориях скрипта и может быть использован при повторном запросе на получение тех же статей.
Это очень полезно, если объем получаемого контента большой, - ведь в этом случае возобновление работы
после любого сбоя не представляет проблем, достаточно заного указать начальную и конечную страницы,
а скрипт сам определит какие из статей уже получены, а какие предстоит сграбить.

[*] Расширяемость.
С граббером поставляется и документация к нему с описанием функций и структуры. Ключевые его элементы подробно закомментированы и
расположены в отдельных библиотеках, что позволит оптимизировать или расширить
функционал скрипта даже начинающему программисту. В граббер, также, встроен простой, но удобный механизм подключения
собственных модулей по обработке контента.

[*] Безопасность.
Граббер имеет встроенный механизм авторизации для ограничения доступа к скрипту.
Данную функцию можно включить и выключить в любой момент.

[*] Выгодные условия.
Стоимость данного скрипта - 10 WMZ. Форма оплаты - WebMoney.
При покупке вы получаете:

[*]Полный дистрибутив скрипта с открытым исходным кодом и документацией;
[*]Следующие драйвера:

[*]DLE 7.x / 8.x
[*]IPB
[*]SMF
[*]WordPress
[*]phpBB 3.0.x
[*]LiveStreet
[*]Joomla
[*]Конвертор новостей в текстовые файлы
[*]Универсальный драйвер удаленного импорта новостей для сайтов, на которых нельзя разместить свой сторонний php код (например, ucoz)

[*]Множество модулей по обработке новостей;
[*]Отсутствие ограничений по времени использования;
[*]Отсутствие привязок (к домену/IP/....);
[*]Бесплатную техническую поддержку по электронной почте и ICQ в течении месяца;
[*]Бесплатные обновления в течении 6 месяцев;

[*] Итого
По любым вопросам вы можете обращаться по ICQ: 444442414
Если Вас заинтересовал граббер, я могу предоставить ссылку на демонстрационную онлайн версию,
где вы можете протестировать его на сайтах, которые Вам интересны. Пишите!

Граббер с порно тубов

katrik — Thu, 11 Feb 2010 14:56:48 GMT

Грабит 6 тубов:
1) redtube.com
2) tnaflix.com
3) xvideos.com
4) shufuni.com
5) hippotube.com
6) keezmovies.com

Имеет следующие функции:
- сохраняет картинки на сайте
- может брать плеер с самих тубов или подставлять flv ссылку под ваш плеер
- переводит названия с помощью translate.google.ru
- может отправлять новости на модерацию
- устанавливать диапазон дат для добавления новостей
- генерирует русские названия, краткие, полные описания, ключевые слова, облако тегов
Стоимость 10 баксов
icq 444442414

grabber для joomla

katrik — Thu, 17 Dec 2009 15:57:49 GMT

Называется граббер 4rss я его не юзал, но говорят хороший. Качайте!

Парсер с сайта redtube.com

katrik — Thu, 17 Dec 2009 15:51:59 GMT

У меня появился парсер для dle с redtube.com. Работает быстрее не куда, по 1 странице за пол минуты, картинки грузит на сервер, плеер можете поставить любой,вот сайт где я поработал 30 мин sexx-club.ru
Цена: 50 рублей
Пишите в icq 444442414

RSS graber 3.1 + Синонимайзер

katrik — Thu, 17 Dec 2009 15:48:48 GMT

Версия DLE : 7.0-7.5
Как он синонемезирует :
AutoRun Design Specialty - Это интерпретатор для создания листок автозапуска диска. Содержит удобные китара для создания оригинального индивидуального листок. Есть вероятие вводить похожий тип, такие насколько ступенька лицензионного соглашения, джингл, появляющаяся рядом вставке диска во доставление, интервал, сопровождающее закрытие листок равно т. д. Программа дает вероятие слагать листок не без; неограниченным ровно по страниц, слушай да эксплуатнуть во нем кнопки, графические обложка, экспликация, Flash-ролики, видеофайлы.
Программа охватывает большую библиотеку кнопок, иконок, разделителей, фоновых изображений равно других неотъемлемых элементов листок, имеется в наличии в наличии вероятие использования произвольного графического файла во качестве текстуры для кнопок, слушай да внедрение во оболочку медиапрогрывателя, не без; через которого может воплощаться показ фильмов, записанных бери диске.

Работает как и в полной так и краткой новости
Автор: Ricona

rss grabber dle 3.1

katrik — Thu, 17 Dec 2009 15:42:55 GMT

Модуль собирает новости из выбранных Вами RSS каналов и публикует их у Вас на сайте.
Модуль работает в 3 этапа:
1. Собирает все новости из rss канала, если заданы начальный и конечные шаблоны идёт по ссылке на полную новость, если нужно авторизируется и собирает данные.
2. Пользователь выбирает необходимые ему новости и если нужно изменяет.
3. Сохраняет полученные новости в базе при этом если в новостях встречаются картинки и если разрешено в настройках то сливает все картинки на сервер и закрепляет за новостью.

Отличие от v 3.0.2 :
1. Исправлена ошибка при автоопределении категорий;
2. Исправлена когда в админке вносился один автор то новость была без автора;
3. При граблении через Админку теперь показываются только те новости которых нет в базе;
4. В админке вынесена функция перекодировка с utf-8 и koir-8(т.к. cp1251 так же перекодировалось но некоректно);
5. В админке теперь каналы сортируются не по дате а по наименованию плюс можно редактировать название канала;
6. Если новость по каким то причинам не попала в базу так и пишеться "Недобавлена" ;
7. Картинки вставляются только по центру и грабятся при включенной функции "Загружать изображения на сервер" не зависимо как она стоит на сайте доноре и автоматически тумбируются под размеры конфигурации сайта;
8. Исправлена проблем с одинарной кавычкой в Заголовке.

Новая установка теперь заключается в копировании файлов и установки новой таблицы.
P.S. Закладка(Авторы) в админке предназначена для ввода авторов отличных от постоянных, которые вносятся непосредственно в файлах cron.rss.php и rss.php в строчке

$input=array ('Admin', 'Admin', 'Admin', 'Admin');

Вместо Admin.

rss grabber dle 3.0

katrik — Thu, 17 Dec 2009 15:36:46 GMT

Модуль работает в 3 этапа:
1. Собирает все новости из rss канала, если заданы начальный и конечные шаблоны идёт по ссылке на полную новость, если нужно авторизируется и собирает данные.
2. Пользователь выбирает необходимые ему новости и если нужно изменяет.
3. Сохраняет полученные новости в базе при этом если в новостях встречаются картинки и если разрешено в настройках то сливает все картинки на сервер и закрепляет за новостью.

По отношению к Rss Grabber 3.0.1

1. картинки заливаются в /uploads/post/2008-{месяц}/
2. тумбы автоматом делаються (под установки сайта) если на сайте доноре под тегом [thumb]
3. автоматически генерируются ключевые слова и описание статьи
4. пользователь добавивший новость теперь Admin + в админке к каждой ленте можно поставить персонального автора(ов) минимум двух ( работает рендомность авторов)
5. Атоматически прописуються тегами категории сайта донора
6. Атоматически сравниваются ваши категории и сайта донора и соответственно подставляються(кому-то может не понравиться)
7. При ручном граблении в админке название новости есть форма а рядом ссылка на теги, полную и короткую новость
8. Раздвоена функция "Публиковать на главной" и "Модерация" с выносом в админку
9. Исправлеен баг при проверке отключеных функций на хосте
10. Перделана схема записи картинок в базу (если выскакивала ошибка при загрузке картинок они не удалялись автоматически)
11. Добавлены "Ключевые слова:" в крон
12. Изменён немного и дополнен выше и ниже сказанным крон
13. добвлено перекодировка полной новости в ср1251 т.е. если на сайте доноре кодировка utf-8, koi8-r
14. Исправлен баг с кавычками в Заголовке новости

В админке добавлен пункт "Тумбировать все изображения:" - т.е. тумбирует изображения под тегом [img].

Установка в два шага:

1. Загрузите все файлы из папки "uploads".
2. Запустите http://сайт/install.php.

grabber dle 9.2

katrik — Thu, 17 Dec 2009 15:27:19 GMT

Новый граббер для dle версии 9.2 nulled
Инструкция:
Создайте папку grab в корне,поместите файлы и поставьте для них права 777.
Теперь идём к файлу indexd.php? видим строчки
    $host="сервер бд"; // server: localhost (127.0.0.1)
    $user="тут имя пользователя бд"; // Юзер MySQL
    $pass="пороль пользователя бд"; // Пароль к Юзеру MySQL
    $dbname="имя базы данных"; // Имя базы данных MySQL
Как заполните идите по адресу http://вашсайт/grab/indexd.php
А там всё понятно уже!
Если что то не понятно пишите в аську 444442414
Источник grabber.3dn.ru

grabber dle 8.0

katrik — Thu, 17 Dec 2009 15:24:33 GMT

Это версия граббера 8.0 для dle идёт у меня на отлично, установка как и у версии 8.2
Инструкция:
Создайте папку grab в корне,поместите файлы и поставьте для них права 777.
Теперь идём к файлу indexd.php? видим строчки
    $host="сервер бд"; // server: localhost (127.0.0.1)
    $user="тут имя пользователя бд"; // Юзер MySQL
    $pass="пороль пользователя бд"; // Пароль к Юзеру MySQL
    $dbname="имя базы данных"; // Имя базы данных MySQL
Как заполните идите по адресу http://вашсайт/grab/indexd.php
А там всё понятно уже!
Если что то не понятно пишите в аську 444442414
Источник grabber.3dn.ru

grabber dle 8.2

katrik — Thu, 17 Dec 2009 15:19:11 GMT

Простой граббер для dle без всяких наворотов, идёт не на все версии DLE
Инструкция:
Создайте папку grab в корне,поместите файлы и поставьте для них права 777.
Теперь идём к файлу indexd.php? видим строчки
    $host="сервер бд"; // server: localhost (127.0.0.1)
    $user="тут имя пользователя бд"; // Юзер MySQL
    $pass="пороль пользователя бд"; // Пароль к Юзеру MySQL
    $dbname="имя базы данных"; // Имя базы данных MySQL
Как заполните идите по адресу http://вашсайт/grab/indexd.php
А там всё понятно уже!
Если что то не понятно пишите в аську 444442414
Источник grabber.3dn.ru

Автоматический граббер для ucoz

katrik — Thu, 17 Dec 2009 15:14:45 GMT

Новый авто граббер для ucoz который работает только на компьютере через PHP, запускается камандной строкой.
Установка:
Скачайте граббер, также в архиве Вы обнаружите PHP.
Устанавливаем PHP, при установке будет задан вопрос "Создавать веб сервер", выберите последний вариант "НЕ создавать веб сервер"
Теперь настройка граббера:
Заходим в файл config.php и видим строчки
/** Сайт на укозе */
$_cfg['ucoz']['site'] = 'Пишите адрес вашего сайта'; // без http://

/** Логин (администатора/модератора/репортера) */
$_cfg['ucoz']['login'] = 'логин пользователя от имени которого будете добавлять новости';

/** Пароль */
$_cfg['ucoz']['password'] = 'пороль пользователя';
Заполняйте их, видим строчку

/** Грузить картинки на сервер? */
$_cfg['ucoz']['is_load_images'] = TRUE;
TRUE значит грузить картинки на Ваш сервер а FALSE не грузить, остальное трогать не обязательно!
Идём в файл fuck.php, и видим там строчки:
// Конф
$dle_site = 'тут адрем dle сайта без http';
$dle_start = с какой странички начинать грабить;
$dle_end   = на какой закончить грабить;
$cat       = номер категории на вашем сайте;
$cat_dle   = 'категория на dle сайте с которой грабить например music';
Как заполните сохраните!
Идём в пуск-все программы-стандартные-командная строка
пишите в командной строке путь к папке с граббером, пример:
cd C:\Users\katrik\Documents\ucoz
cd перед путём обязателен
нажимаем enter и вводим ещё строчку php fuck.php и нажимаем enter
Все граббер запущен должны появляться надписи News added или типо того.
Все вопросы по установке и настройке в icq 444442414
Источник grabber.3dn.ru
Стоимость 100 рублей
icq 444442414

Автоматический граббер + синонемайзер для ucoz

katrik — Thu, 17 Dec 2009 14:58:09 GMT

Заходим в файл config.php и видим строчки
/** Сайт на укозе */
$_cfg['ucoz']['site'] = 'Пишите адрес вашего сайта'; // без http://

/** Логин (администатора/модератора/репортера) */
$_cfg['ucoz']['login'] = 'логин пользователя от имени которого будете добавлять новости';

/** Пароль */
$_cfg['ucoz']['password'] = 'пороль пользователя';
Заполняйте их, видим строчку

/** Грузить картинки на сервер? */
$_cfg['ucoz']['is_load_images'] = TRUE;
TRUE значит грузить картинки на Ваш сервер а FALSE не грузить, остальное трогать не обязательно!
Как установить на хост:
Нужен не какой нибудь free хост а нормальный платный, для более быстрой работы граббера, я предлагаю Вам хостинг http://billing.progoldhost.net/host.php?uid=1620&bid=1 он подходит отлично для граббера, тариф любой!
Установка на этот хост:
Заходим в админку на хосте, далее нажимаем "Диспетчер файлов", в корне создайте папку grab и залейте туда файлы граббера, далее идём по адресу http://вашсайт/grab/index.php, и далее вводим в поле адрес сайта на дле с категорией пример http://dle.ru/games, и из списка Выбираем в какую категорию грабить, нажимаем enter сначало он сграбит первую страницу, вы нажмите на кнопку 2 и идите занимайтесь своими делами
Все вопросы по установке и настройке в icq 444442414
Источник grabber.3dn.ru

Граббер для ucoz

katrik — Thu, 17 Dec 2009 14:23:29 GMT

Самый первый граббер для ucoz. Эта вещь может грабить материалы с сайтов DLE и при этом загружать картинки на сервер, очень прост в управлении. Устанавливается на хост или DENWER(http://www.denwer.ru/)
Настройка:
Заходим в файл config.php и видим строчки
/** Сайт на укозе */
$_cfg['ucoz']['site'] = 'Пишите адрес вашего сайта'; // без http://

/** Логин (администатора/модератора/репортера) */
$_cfg['ucoz']['login'] = 'логин пользователя от имени которого будете добавлять новости';

/** Пароль */
$_cfg['ucoz']['password'] = 'пороль пользователя';
Заполняйте их, видим строчку

/** Грузить картинки на сервер? */
$_cfg['ucoz']['is_load_images'] = TRUE;
TRUE значит грузить картинки на Ваш сервер а FALSE не грузить, остальное трогать не обязательно!
Как установить на хост:
Нужен не какой нибудь free хост а нормальный платный, для более быстрой работы граббера, я предлагаю Вам хостинг он подходит отлично для граббера, тариф любой!
Установка на этот хост:
Заходим в админку на хосте, далее нажимаем "Диспетчер файлов", в корне создайте папку grab и залейте туда файлы граббера, далее идём по адресу http://вашсайт/grab/index.php, и далее вводим в поле адрес сайта на дле с категорией пример http://dle.ru/games, и из списка Выбираем в какую категорию грабить!
Все вопросы по установке и настройке в icq 444442414
Источник grabber.3dn.ru