Новая версия граббера сайтов FDE Grabber 4.3
Дорогие друзья, сообщаем о том, что вышла новая версия системы импорта новостей и статей FDE Grabber 4.3 О сделанных изменениях и дополнениях:
- Была изменена система логирования. Теперь в лог записи сохраняются не в виде одноязычной фразы, язык которой совпадает с языком интерфейса по умолчанию, а в виде параметров, что даёт возможность при просмотре лога показывать описание события на текущем языке, выбранном администратором
- Добавлена возможность замены регулярными выражениями, а также обычной замены текста после основных преобразований контента (когда именно следует применять замену указывается при настройке категории)
- Добавлены два новых хака для указания ссылки на источник (для соблюдения авторских прав). Можно настроить указание ссылок на источник по своему усмотрению и вкусу, изменив файл хака (хаки обязательно требуется сохранять в кодировке UTF-8)
- Добавлен хак корректировки незакрытых тегов. Работает быстрее чем предыдущий. Теперь именно он используется в комплексном хаке “красивый контент”
- Добавлена возможность предварительного просмотра статей при выводе списка статей. Просмотр можно осуществлять как в виде HTML так и обычном виде, добавлена возможность быстрого просмотра при наведении мышки на ссылку “просмотр”, с помощью ajax технологии
- зайти в персональный кабинет на нашем сайте https://fde-cms.com/ или https://fde-cms.ru/
- скачать дистрибутив версии 4.3*
- следовать инструкции по обновлению, которая находится в корне дистрибутива (файл “how_to_update_from_4.2_to_4.3.txt”, текст сохранён в кодировке Windows-1251)
- Заходим на сайт https://fde-cms.com/ или https://fde-cms.ru/ (первый на английском языке, второй на русском) под своим логином. Если ещё логина нет, то требуется зарегистрироваться на странице регистрации: https://fde-cms.ru/do/registration/
- Переходим в раздел лицензий: https://fde-cms.ru/do/my_licenses/. Если у вас ещё нет лицензии, купить лицензию FDE Grabber на странице https://fde-cms.ru/do/order/ (требуется залогиниться)
- Далее, на странице лицензий находим нужный нам дистрибутив и нажимаем на ссылку “скачать” (смотрите скриншот ниже). Здесь требуется предостеречь: не нажимайте по несколько раз на эту ссылку – генерация дистрибутива довольно длительный процесс, поэтому требуется дождаться ответа сервера, в случае двойного нажатия сайт вас забанит и придётся писать в службу поддержки для разблокировки
Новая версия граббера сайтов FDE Grabber 4.3, читать далее...
Вышла новая версия граббера 4.2
- добавлена возможность указания публикации на один из выбранных сайтов при настройке источника в граббере случайно. То есть, теперь вы сможете публиковать получаемые новости с определённого источника или на все указанные сайты или случайно на один из указанных
- при настройке категории, в заменах регулярными выражениями вы сможете делать замены в HTML списках новостей (в HTML коде) до получения краткой новости (только для html источников). Это даёт возможность более гибкой настройки и парсинга html источников
Новогодний сюрприз
скачать FDE Grabber 4.1
FDE Grabber 4.0 уже доступна
С радостью сообщаем о том, что доступна для тестирования на нашем демо сайте https://fdegrabber.demo.fdstar.net/grabber-demo/ и покупки новая версия системы импорта новостей FDE Grabber 4.0 Из новшеств, коснувшихся версии, кратко, можно отметить следующие:
- полнофункциональная мультисайтовость: Публикация доступна из одного источника на неограниченное число сайтов, работающих на любой из поддерживаемых CMS. Это означает, что мы не только ввели мультисайтовость, но и отказались от привязок лицензий к CMS - теперь вы можете работать с любой поддерживаемой CMS в рамках одной лицензии
- Чтобы компенсировать такую щедрость, мы ввели ограничение запуска одной лицензии с 10 IP адресов *
- Чтобы компенсировать ограничение запуска с 10 IP адресов, мы постарались и сделали возможность удалённой публикации - это означает, что теперь вы сможете установить систему импорта новостей, например на локальный компьютер, и публиковать полученные статьи на неограниченное число своих сайтов, работающих на любом хостинге, где есть PHP
- Полностью проведён редизайн и ребрендинг системы, это хорошо заметно тем, кто видел нашу систему раньше - серой и безликой
- Добавлено переключение языков админцентра FDE Grabber
- Ну и, конечно же, множество других вкусностей... ;-)
FDE Grabber 4.0
Уважаемые пользователи системы импорта новостей, а также потенциальные клиенты. Рады сообщить, что подходит к концу работа над новой системой лицензирования FDE Grabber, которая вступает в силу с версии FDE Grabber 4.0 Поэтому, в ближайшее время вы сможете приобрести/обновиться до версии FDE Grabber 4.0 Новая система лицензирования, в отличие от старой, предусматривает проверку лицензий через наш сервер, а также ограничение на запуск системы импорта новостей с 10 IP адресов в рамках одной лицензии. Список вы сможете отредактировать в личном кабинете на нашем сайте ; Ограничений на запуск по доменам по прежнему не будет
Выпущена новая версия системы импорта новостей FDE Grabber
Мы выпустили новую версию граббера FDE Grabber 3.5 Среди новых функций: - разграничение прав и свобод пользователей в админке граббера. Возможность назначать пользователям группу. Возможность создавать новые группы, с указанием прав доступа - возможность устанавливать лимит публикуемых статей за день - возможность автоматического клонирования категорий и источников - возможность автоматического определения категории, к которой относится данная статья на основе обработанных стеммером ключевых слов
Стемминг — это процесс нахождения основы слова для заданного исходного слова. Основа слова необязательно будет совпадать с морфологическим корнем слова. Процесс стеминга применяется в поисковых системах для обобщения поискового запроса пользователя. Конкретные реализации стемминга называются алгоритм стемминга или просто стеммер.- возможность распознавания русских дат - возможность указания нескольких шаблонов для парсинга через тег логического ИЛИ: {or} - возможность автоматического переименования получаемых картинок путём транслитерации заголовка статьи для получения псевдо SEF (ЧПУ) адресов - возможность настройки расположения вотермарка: левый верхний угол/правый верхний угол/левый нижний угол/ правый нижний угол/по центру/случайно из перечисленных вариантов - возможность указания случайной флуктуации дат публикации статей Также добавлен новый хак для перемешивания предложений. И отличная фича: расширение текстовых полей ввода типа textarea с помощью JavaScript с последующим запоминанием размера
Выпущена новая версия системы импорта новостей FDE Grabber, читать далее...
Хаки для граббера
Что такое хак, применительно к грабберу? Хак, это микропрограмма, вызываемая для обработки получаемого содержимого (контента). Из-за того, что полученный контент часто приходится каким-либо образом обрабатывать, например выравнивать картинки по правому или левому краю или по центру. Или, к примеру, удалять все ссылки на третьи сайты, оставляя просто текст или заключать в тег <noindex>, добавляя атрибут rel=nofollow Таких простых задач, может набраться довольно много. Поэтому, мы добавили в систему импорта новостей возможность указывать хаки для обработки контента, и даже создавать свои (потребуются знания языка PHP)
Кроппинг изображений
Наверняка вам приходилось бывать на новостных порталах, где все изображения имеют маленький, причём одинаковый размер. Неужели авторы новостей сидят в фотошопе или в гимпе и занимаются операцией подгонки под один размер (кроппинг, crop image)? Нет, всё гораздо проще. Это делают обычные скрипты или программы в автоматическом режиме при публикации.
Автоматизация граббинга кроном
В данной статье речь пойдёт про автоматизацию импорта новостей на *nix-овых платформах, то есть, про запуск кроновских скриптов граббера, с помощью планировщика задач cron В граббере имеется 3 этапа импорта статей:
- кроновский скрипт путь_к_грабберу/crontab_feeds.php определяет один из доступных источников получения статей (RSS/Atom/HTML источник) и обновляет его. Если, при этом, имеются новые статьи (уникальность статьи определяется по названию), то статьи будут добавлены в качестве задания для получения По мере запуска данного кроновского скрипта, источники обновляются по кругу Каждому запуску скрипта соответствует одно обновление одного из доступных источников
- кроновский скрипт путь_к_грабберу/crontab_articles.php смотрит на задания для получения статей и получает статью. Одному запуску данного скрипта соответствует одно получение статьи
- кроновский скрипт путь_к_грабберу/fde_grabber_3/crontab_publicate.php публикует полученные статьи в вашу CMS