|
|
|
|
|
Краткое описание Newstrack
Newstrack - программный робот предназначенный для сбора, анлиза и обработки веб страниц в сети Internet.
Newstrack осуществляет непрерывный мониторинг заданных новостных источников и осуществляет конвертацию их содержимого
(ссылок и описаний новостей или другого рода информации) во внутреннюю базу данных для последующего доступа к ней клиентской части.
Обход новостных источников осуществляется один раз за заданный промежуток времени (например раз в 15 минут).
Эвристический подход позволяет спайдеру полуавтоматически определять интервалы времени для обхода для экономии
потребляемого сетевого трафика. Полуавтоматически обозначает то, что администратор на основе предоставляемых
спайдером отчетов может сам
задавать часы или интервалы обхода источников или же определить график опроса каждого источника персонально.
Все полученные статьи не только заносяться в базу, а так же индексируються внутренним поисковым механизмом.
Для каждого клиента мы предлагаем дополнительную настройку продукта, что бы он точно соответсвовал Вашим потребностям.
В состав пакета входит техническая поддержка и ответы на все возникающие вопросы. (Offline сервис).
Newstrack поставляеться в виде двух базовых пакетов:
- Робот - спайдер и менеджер управления системой;
- Пример исходного кода построения новостного портала на базе Newstrack
За отдельную плату возможна доработка системы под кокретные нужды заказчика
(например мониторинг других типов данных, таких как финансовые тикеры, каталоги товаров и цен на них, прочее).
Возможен заказ и адаптация Newstrack под конкретную Базу данных заказчика и интеграция с другими продуктами.
Возможности спайдера Newstrack
- Универсальный парсер контента
Спайдер содержит универсальный парсер HTML страниц.
Это значит что для добавления нового новостного источника достаточно его подключить в систему и задать расписание опроса.
Данный подход позволяет легко реализовать сбор новостей без участия программиста.
Кроме выделения активных новостных заголовков , так же поддерживается захват иллюстраций (картинок).
- Встроенных обработчик RSS лент
RSS Формат во всем мире объявлен как "универсальный новостной формат". Newstrack c легкостью обрабатывает RSS ленты. Следует заметить что очень много западных сайтов дают возможность
экспорта новостей именно в RSS формате.
- Модуль для скачивания и обработки контента веб страниц
Данный модуль позволяет помимо обработки заголовков новостей скачивать их тексты и осуществлять дополнительную обработку,
в автоматическом режиме.
Замечание: Следует осторожно подходить к выбору источников для републикации, т к некоторые из них предоставляют эксклюзивные материалы не
предназначенные для воспроизведения на других сайтах.
- Автоматический экспорт новостей
Newstrack поддерживает автоматический (сразу после получения и обработки) экспорт текстов новостей (или заголовков).
Например вы можете установить сервер на отдельном канале и автоматически заполнять базу данных новостей на другом сайте.
При этом поддерживается HTTP POST закачка или же отправка текстов (статей) на заданный почтовый ящик.
- Модуль администрирования
Модуль управления источниками реализован на языке PHP и позволяет полностью управлять всеми параметрами конфигурирования и получения статистики
по работе сервера. Модуль позволяет группировать новости по темам (категориям), добавлять и удалять ленты,
конфигурировать параметры парсеров, просматривать подробную статистику, добавлять свои специфические парсеры контента,
управлять параметрами экспорта и многое другое
(например конфигурировать параметры внутренней банерной сети).
Технические требования для Newstrack
- Платформа: Unix (FreeBSD, Linux, Sun Solaris) / Windows (NT/2000 и выше)
- Поддерживаемая СУБД: Mysql 3.23 (и выше). Возможна адаптация под любую другую СУБД (PostgreSQL, MSSQL, Oracle, Firebird)
- Perl 5.6 и выше. Необходимые модули:
- Широкополосный доступ в сеть Internet.
В зависимости от количества опрашиваемых источников и интервала их опроса трафик потребляемый проектом может варьироваться довольно широко.
Для справки - проект topnews.com.ua при опросе около 230 источников раз в 30 минут и потребляет около 160 Gb трафика в месяц.
Demo
Вы можете попробовать посмотреть как сделан Newstrack. Ссылки ниже приведут Вас на сайт который позволит Вам самостоятельно добавить или изменить
настройки источников. Сайт обновляется трижды в сутки.
Если Вы заинтересовались - пишите, ответим на все Ваши вопросы.
Цена
На данный момент мы предлагаем продукт по сниженной цене.
| Продукт |
Комплектация |
Цена (USD) |
| Newstrack Full |
Включает:
Робот сбора информации;
Модуль управления роботом;
Набор предварительно сконфигурированных источников (около 100)
Исходный код сайта новостного портала (topnews.com.ua);
Поддержка и помощь в настройке; |
600 |
| Newstrack Lite |
Включает:
Робот сбора информации;
Модуль управления роботом;
Набор предварительно сконфигурированных источников (около 50)
Поддержка и помощь в настройке; |
420 |
Разработка
Данный проект и все права на него полностью принадлежат Владимиру Данилюку (Lord Time)
и компании Codewind Software .
Пожалуйста, все коммерческие предложения и предложения о сотрудничестве направляйте по
.
|
|
|
|
Пресс - релизы
