Здравствуйте, ТЗ ниже, оставляйте заявки у кого есть опыт работы с Битрикс и кто сможет помочь, ну и собственно за какую цену и срок.
Парсер данных с сайта
Добрый день.
Нужен парсер на основе одной или нескольких ниже указанных технологий.
Парсер заказывается в связи с сменой движка портала.
Парсер должен работать с сервера centos, желательно быть написанным на php. (обсуждаемо)
headless chrome/phantomjs/casperjs/selenium/chromium (обсуждаемо)
парсер должен делать следующее:
1. Работать с списком прокси. Загружать, обновлять, если не работает – менять прокси.
2. Осуществлять поиск, (через форму поиска портала) по перечню ключевых слов
3. Парсить выдачу. выдача состоит из карточек товара. (до 300-500 товаров).
Нужно разобрать каждую карточку. Разобрать на 3-5 ключевых переменных. + ссылку на подробную информацию о каждом товаре.
Добавить это в базу данных mysql.
Важно:Выдача по ключевому слову динамически подгружается по кнопке "Загрузить еще".
4. Парсить подробную информацию по каждому из товаров по собранной ранее ссылке
(10-15 ключевых переменных),разобрать и записать это в базу данных.
Данная часть должна быть многопоточной 3-5 одновременно работающих потока. Должно парситься
1-2 тыс. товаров за 4-6 часов.
Есть платные прокси.
Есть базы данных от работающего ранее парсера.
Капчи на портале нет.
У вас должен быть опыт разработки аналогичных парсеров.
В работу должна входить отладка и доведение до конечного результата (поддержка в течение 5 дней).
Стоимость обсуждаема. Время выполнения обсуждаемо.
Подробное ТЗ и ссылка на портал по запросу после вашего отклика.
Выбранный исполнитель
Заявки фрилансеров
Похожие заказы
- Веб-программирование1 исполнительЗакрыт5 лет назад
- $350
Здравствуйте, уважаемые фрилансеры! На удаленную работу требуется верстальщик-программист. Основные обязанности: - Разработка новых проектов (верстка и интеграция в CMS Diafan) - Ведение и корректировки существующих проектов (правки ...
Веб-программирование10 заявокЗакрыт5 лет назад - $200
Есть скрипт, анализирующий маржу по заказам в интернет-магазине, в разрезе источников - рекламных кампаний (utm_campaign) Нужно в него подтягивать расходы по рекламным кампаниям из Яндекс.Директ и GoogleAds
Веб-программирование3 заявкиЗакрыт5 лет назад Тест из 21 вопроса. Каждый вопрос - 4 варианта ответа (можно выбрать 1 и более). Результат - сумма и ее интерпретация (в зависимости от того, в какой диапазон значений попадает сумма). Плюс к этому ...
Веб-программирование1 заявкаЗакрыт5 лет назад- $100
Сделать функцию восстановления пароля. Сайт самописный. Необходимо сделать сегодня
Веб-программирование6 заявокЗакрыт5 лет назад Есть сайт, который выполняет рассылку подписчикам. Надо доработать модуль рассылки писем.
Веб-программирование5 заявокЗакрыт5 лет назадЕсть начатый и не завершенный сайт на django. Он по сути простой, состоит из трех страниц и пары моделей. Нужно взять то что есть, доработать функционал и перетащить фронт на bootstrap-шаблоны. Шаблоны ...
Веб-программирование1 исполнительЗавершен5 лет назад- $130
На сайте есть выбор фото и отправка в админ панель выбранного фото, нужно добавить еще две кнопки добавления фото, и отправки этих фото в админ панель. Сделать возможным выгрузку фото с админ панели, с ...
Веб-программирование6 заявокЗакрыт5 лет назад - $15
Требуется сделать скрипт переадресации ссылок Telegram и других мессенджеров. Основной функционал желательно на Javascript. Также необходима поддержка веб версии. Структура страницы должна быть как у обычного сайта - title, description, и т.д. ...
Веб-программирование2 заявкиЗакрыт5 лет назад Приветствую! От Вас нужно профессиональная консультация, как правильно зыкрыть дыру. Архив с сайтами предоставим. Оплата по результату.
Веб-программирование1 исполнительЗавершен5 лет назад