Тест категории

Для того, чтобы протестировать правильность настройки категории: настройки границ получения контента с помощью регулярных выражений и/или правильности указания кодировки, можно воспользоваться разделом "Тест категории". При этом, вам необходимо указать категорию для проведения теста, а также полный адрес статьи, соответствующей настройкам данной категории

Тест категории, читать далее...

Категории источников

В граббере FDE Grabber имеется раздел "Категории источников". Давайте рассмотрим его подробно. В данном разделе создаются категории для ваших источников. Источники могут быть трёх типов:

  1. RSS источники, в данном случае списки статей будут импортироваться из RSS фидов, которые вещает сайт, с которого планируется получать контент
  2. Atom источники, в данном случае списки статей будут импортироваться из Atom фидов, которые вещает сайт, с которого планируется получать контент
  3. HTML источники, в данном случае списки статей будут импортироваться из обычных HTML страниц, на которых имеется список новостей
Для того чтобы получать полное содержимое статей, граббер должен из полученного списка новостей переходить по каждому адресу и парсить страницу. Для того, чтобы получить лишь часть страницы, необходимо указать границы получения полезного контента. Они задаются, с помощью регулярных выражений. Для того, чтобы не было проблем с кодировкой полученных статей, указывайте её явно. Для того, чтобы наша система правильно переводила одну кодировку в другую, необходимо, чтобы на вашем сервере была доступна библиотека iconv. Список кодировок, для указания явно можно пополнять по своему усмотрению в файле ROOT/inc/charsets_list.php Для того, чтобы просмотреть список доступных кодировок в UNIX доступна команда iconv -l Библиотека iconv может быть доступна как системная и/или как модуль для PHP. Если перекодирование работает при ручном тесте, но не работает из CRON, то кроновские скрипты граббера придётся запускать через wget Для того, чтобы граббер логинился на сайт, и мог, например, читать скрытый текст, можно указать POST параметры для логина. Пример: http://www.some-site.ru/index.php?username=ineedwarez&password=ineedwarez Здесь параметры делятся на 2 части:
  1. http://www.some-site.ru/index.php - адрес страницы, на которой будет производиться логин на сайт
  2. username=ineedwarez&password=ineedwarez - непосредственно POST параметры

Категории источников, читать далее...

Граббер новостей

Если Вы занимались или занимаетесь публикацией новостей на своём сайте, то должны понимать, что дело это довольно кропотливое и занимает много времени. Представьте теперь, что больше не требуется заниматься рутинной публикацией! Можно продвигать сайт, повышать его показатели и делать многое другое для вашего проекта, на что ранее не хватало времени! Когда мне говорят что цена слишком высока и покупка граббера не окупится, то я просто привожу цифры. Сколько у вас времени уходит на публикацию новости? Возьмём, к примеру, одну стандартную новость - какую-нибудь программу, которую вы желаете выложить. Ваши действия: Вы пойдёте на ближайший варезник (сайт, на котором "всё есть"), скопируете текст, ссылки и адрес картинки. В среднем, на одну новость уйдёт около 3-х минут, это не много. Теперь возьмём сотню подобных новостей: 100х3=5 часов, неплохо, да? Но ведь сайт с одними только новостями не далеко уйдёт. Его нужно добавить его в поисковики, устроить должную пиар компанию - это всё требует больших усилий и много времени... Я предлагаю вам забыть о том, что такое публикация новостей - пусть этим занимаются увлечённые люди! Если у кого-то, хороший новостной, софтверный или музыкальный портал окупает вложенные затраты, то что помешает вам? Занимайтесь продвижением своего сайта, раскручивайте свой проект, получайте прибыль от рекламы, проводите конкурсы, заводите новые знакомства среди ваших посетителей и в конце концов, освободите пять часов своего времени от рутины! Преимущества проекта FDE Grabber от других заключается в том, что он работает бесперебойно, а настройку я провожу лично. Что вы  получаете при покупке? - RSS/Atom клиент-граббер FDE Grabber 3.5 - помощь в настройке - бесплатные обновления всех версий граббера, на протяжении всего времени поддержки проекта - 500 новостей в день! как? - да легко. Список сайтов-доноров информации (контента) может быть неограниченным: укажете 1000 - получите новости со всей тысячи! Система импорта новостей FDE Grabber - это не модуль, а отдельная система, которая устанавливается рядом с Вашей CMS. Итак, FDE Grabber: - это RSS/Atom, а теперь ещё и с обычных HTML списков новостей граббинг кратких и полных новостей, с возможностью выкачки картинок и автоматического запуска из планировщика заданий CRON - возможность логина на сайт, с которого идёт граббинг (например, для чтения скрытого от гостей текста) - самая совершенная система настройки шаблонов для парсинга (1 - простая, без регулярных выражений; 2 - с использованием регулярных выражений) - разнообразные фильтры и замены слов (1 - простые, без регулярных выражений; 2 - с использованием регулярных выражений) - автоматическое исправление закодированных DLE ссылок - возможность создания превью для картинок - возможность наложения на картинки вотермарков - возможность предварительного тестирования правильности настроек - встроенный синонимайзер (в комплекте 2 базы: русскоязычная и англоязычная) - редактирование синонимов и стоп-слов через администраторский интерфейс - экспорт/импорт настроек граббера - экспорт/импорт баз синонимайзера - корректная работа с известными кодировками - возможность работы через прокси - ведение лога событий - поддержка фейковых пользователей и комментариев - возможность парсить ленты которые работают через FeedBurner - возможность парсить ленты, получать картинки, сохранять статьи, обходя редиректы - возможность выкачивания полностью всех новостей с сайта, в случае использования HTML источников (это достигается путём задействования обхода пейджера: http://site.com/page/{page}/, где {page} будет принимать значения номеров страниц пейджера сайта с указанным интервалом) - возможность обхода по параметру, в случае использования HTML источников: http://site.com/param/{param}/, где {param} будет принимать указанные значения - корректная работа с тегом base - возможность использовать собственные хаки (микропрограммы для обработки контента). На данный момент, в стандартный дистрибутив входит порядка 10 хаков - отдельная настройка размеров изображений для краткой и полной новости - возможность не только уменьшать картинки, но и производить операцию обрезки (crop image) - расширяемость - ваше удобство и комфорт Хотя большинство клиентов используют нашу систему для импорта новостей именно с сайтов, работающих на DLE (DataLife Engine) - было бы совершенно неправильно полагать, что граббер способен получать новости только с таких сайтов. Наш граббер может импортировать новости с любых сайтов, вещающих RSS/Atom новости и/или имеющих HTML страницы с обновляющимися списками новостей Что такое HTML страницы новостей, или HTML списки новостей. Давайте разберёмся подробнее. Обычная страничка, на которой имеется список с новостями, в которых есть адрес конечной статьи, название, краткое описание может считаться HTML списком новостей Пример HTML списка новостей - обычный блог со списком новостей, например страница http://fdstar.com/ является HTML списком новостей. Здесь имеется список новостей, включающий адрес конечной статьи, название, краткое описание. Требования к серверу (хостингу): - CRON - PHP 4.3.0 и выше (рекомендуется от 5.2.5 и выше) - MySQL 4 и выше - PHP библиотеки: pcre, mysql, iconv, curl, xml, gd, mb Требования к настройкам PHP: - safe_mode is off - open_basedir is off - allow_url_fopen is on Мы облегчили проверку совместимости нашей системы импорта новостей с используемой вами платформой (хостингом). Теперь достаточно запустить проверочный скрипт и узнать результат: совместимо или нет. Скачать проверочный скрипт можно отсюда. При этом, требуется распаковать архив с проверочным скриптом, и запустить php сценарий у Вас на сервере (хостинге) из строки браузера. Результат работы скрипта будет выглядеть примерно так. Данный скрипт не проверяет версию вашего MySQL и наличие на сервере CRONа. Поэтому эту информацию вы должны уточнить самостоятельно. Мы позаботились о том, чтобы Вы не чувствовали себя покупателем "кота в мешке". Для вас доступно онлайн демо граббера, которое расположено по адресу: http://fdegrabber.demo.fdstar.net/ логин: admin пароль: 123456 Обязательным условием при покупке нашей системы импорта новостей является предоставление результатов теста на совместимость Вашего хостинга с граббером Граббер работает со следующими движками (CMS, публикует в них полученные новости)*: - DLE (Data Life Engine) - Strawberry - 2z-project - NG - Wordpress (WP) - Joomla - e107 - Drupal - Danneo - FDE Если в приведённом списке не представлен движок Вашего сайта, то возможна доработка нашего граббера для работы с ним (бесплатно, при условии, что движок имеет массовое распространение). * Для каждого движка приобретается отдельная лицензия Приобретённую лицензию вы можете использовать на всех своих сайтах что является, несомненно, преимуществом, но не можете передавать третьим лицам При покупке программного продукта "FDE Grabber" Вы автоматически соглашаетесь с лицензионным соглашением Способы оплаты: с помощью системы электронных платежей WebMoney (проверить наш аттестат можно здесь: http://passport.webmoney.ru/asp/certview.asp?wmid=424144152559) / банковским переводом на пластиковую карточку / с помощью системы денежных переводов Western Union / Ваш вариант Если Вы желаете получить бесплатную демо версию нашего движка импорта новостей (на вашем сервере должна быть включена поддержка php функции eval) или поолучить доступ к on-line демо граббера, обращайтесь по icq: 7-055-734 Общие вопросы по грабберу можно задавать через данную форму Пример сайта, который обновляется нашим граббером: http://warezed.ru/ Обсуждение граббера ведётся в форуме: http://forum.fdstar.net/index.php?topic=14.msg16 Для справок: (+380 95) 040-37-33, (+380 652) 612-684 Вас проконсультируют в любой рабочий день, с 9 до 16 часов, по украинскому времени (GMT +02:00); кроме выходных: СБ, ВС, а также официальных праздников Для того, чтобы бесплатно скачать систему импорта новостей FDE Grabber (демо версию) - обращайтесь только к нашим специалистам! Если вы нашли в Интернете пиратскую (nulled) версию нашей системы - просим об этом сообщить, тогда при приобретении нашей системы импорта новостей, вы получите специальную бонусную скидку в размере 30% от текущей стоимости

Граббер новостей, читать далее...

Открытие сайта

Здравствуйте, дорогие друзья. Вот и открылся долгожданный сайт поддержки системы импорта новостей FDE Grabber. Данный сайт предназначен для пользователей и будущих пользователей нашей системы импотра новостей (граббера)

Открытие сайта, читать далее...