Нужно разработать мощного бота, собирающего данные с указанных источников с пост-очисткой от рудиментов

Данные: источник сбора, товар, цена

Бот будет устанавливаться на серьезную локальную машину с хорошим пропускным каналом. Работать должен по крону.

Бот должен по таймеру залезать на каждый требуемый ресурс (список ресурсов определяет пользователь), собирать информацию и складывать ее в базу данных в требуемом виде. Информация - это прайс-лист с товарами, в одном прайс-листе может быть от 1000 до 30000 товаров, т.о. речь идет о достаточно большом массиве данных.

Для определения сущности "товар", "обязательные параметры товара", а также параметра "цена" должна использоваться подключаемая база знаний, т.е. глоссарий терминов и выражений.

Задача бота - собирать информацию с 100-500 ресурсов в день и обновлять данные в БД. Предположительно, сохранять данные можно в SQL

Вариант написания 100 шаблонов - не подходит, нужно более технологичное решение. Шаблоны постоянно могут меняться и решение становится неустойчиво. Речь идет о прототипе мини-поисковой системы с настраиваемыми параметрами поиска и сохранения результатов.

Предполагаемая технологическая основа - mnogosearch + некоторые части сфинкса+regexp для отдельных частей анализатора. Интересует взаимодействие с серьезными людьми, готовыми реализовать весь комплекс (проектирование, разработка, настройка, отладка). Предложите свой вариант, обсудим.

Работу начинаем с полноценного обширного тз и согласованных сроков. Рассматриваем только серьезных исполнителей. Оплачиваем поэтапно.

15 лет назад
dijurkin
Никита 
40 лет
19 лет в сервисе
Был
2 года назад

Заявки фрилансеров

Нет заявок фрилансеров
  • Похожие заказы

  • $1400

    Программа должна быть основана на программе Quick Sales Мы организуем уроки игры на музыкальных инструментах для людей всех возрастов. Программа станет основным средством учета клиентов и преподавателей. По сути мы выполняем ...

    Закрыт
    15 лет назад
  • $200

    Нужна не большая программа для работы с людьми (: Вкратце: 1. Клиент-сервер, *(возможность работать с сервером (сохранять данные) с 3х и более ПК под разными именами пользователей) 2. Админ часть, в нашем ...

    Закрыт
    15 лет назад
  • $80

    Нужна программа, которая будет решать систему дифференциальных уравнений интерфейс должен быть такой, чтобы позволять 1.Запускать численное решение уравнений 2. Выводить в табличной (и желательно ...

    Закрыт
    15 лет назад
  • Интересует обязательная(!) реализация привязки к железу. Предпочтителен Delphi (ибо мне он знаком не по наслышке), но можно и на С'шных и др. Платформа: Windows (XP, 7) Проект долгосрочный (написан начальный фунуционал), ...

    Закрыт
    15 лет назад
  • $500

    Требуется срочно!! Нужно написать программу распознавания элементов рукописного текса (цифр) на основе нейронной сети. Сеть может быть любой, предпочтилеьно двухслойная. Среда разработки delphi. Необходимы коментарии к коду программы. ...

    Прикладное ПО1 исполнитель
    Завершен
    15 лет назад
  • $50

    Мне нужна программа для создания тестов в файле ехе. Идея проста: я составляю тест скажем 700 вопросов (указав правильные ответы) в блокноте сохраняю его затем загружаю в эту программу и создаю тест ...

    Прикладное ПО1 исполнитель
    Завершен
    15 лет назад
  • СРОЧНО нужна простенькая программа, которая будет показывать работу протоколов RIP и OSPF в интернет сети, для сравнения их эффективности. Показатели которые должны использоваться при маршрутизации: 1. длина маршрута 2. ширина канала ...

    Прикладное ПОнет заявок
    Закрыт
    15 лет назад
  • Требуется скомпилировать библиотеку boost::asio под платформу WM5.0 Standart SDK. Нужна статическая библиотека. Работа будет считаться выполненной если разработчик предоставит простой пример: 1. Форма с кнопкой, и двумя полями на ваше усмотрение, ...

    Прикладное ПОнет заявок
    Закрыт
    15 лет назад
  • Программа «Генератор фраз и ключевых слов» предназначена для создания фраз из имеющихся вариантов слов, путем комбинации всех возможных вариантов из предложенных слов. Требование к программе: Язык написания C++; ...

    Закрыт
    15 лет назад