Необходимо для проекта подобрать решение для рассылки, используем в данный момент AcyMailing, но может быть есть лучше решение. Также необходима помощь в настройке этого компонента, он на джумле установлен
Сделать парсер avito через телеграмм бота
Необходимо написать парсер сайта Avito.ru через телеграам бота, ВАЖНО, что бы парсинг происходил НЕ через selenium.Так как selenium очень долгий в этом плане. Необходимо использовать самые быстрые методы извлечения информации, это необязательно должна быть эмуляция браузера. Тем более что парсинг будет происходить через VPS сервер
1) У парсера должна быть многопоточность. Примерная скорость должна быть 9-15к объявлений в час. (Ротационные прокси на 40 потоков предоставлю)
2) У парсера должна быть очередь на использование. (Так как использовать этот парсер буду я и мой товарищ)
3) У парсера должен быть фильтр а именно - Когда запускаешь парсер /start он просит прислать ссылку на парсинг, мы присылаем, и следующим вопросом должен быть вопрос "Сколько активных объявлений должно быть у продавца в профиле", и тут мы указываем например 1, и тогда будут парсится объявления только с 1 активным объявлением в профиле, и следующий вопрос парсера будет - "Сколько неактивных ( Завершенных) объявлений парсить" тут тоже мы вписываем по желанию.
Пояснительный скрин прилагаю
4) У парсера должны логироватся все ошибки.
5) У парсера должна быть замена прокси через телеграмм.
6) Просмотр процесса парсинга через телеграмм, (то есть посмотреть сколько уже спарсилось) И дальнейшее преждевременное завершение парсинга с выдачей результата
7) Парсер должен собирать только уникальные номера телефонов, что бы они больше не повторялись. То есть начал парсинг ---> пошел сбор уникальных объявлений во время САМОГО пасринга, и должны учитыватся результаты прошлого парсинга. Но так как я писал выше, что этот парсер я буду использовать с товарищем, нужно сделать так что бы у каждого была своя база спаршенных номеров.
8) Парсер должен выдавать результат в двух форматах, в exsel и vcf (формат контактов, что бы сразу импортировать в контакты телефона)
Искал ответственного исполнителя, на протяжении 2 месяцев, в итоге все писали что вот завтра уже точно все будет готово, но как вы понимаете, до сих пор жду "завтра"
Еще хотел сказать что времени больше чем 2 дня у меня нет.
Заявки фрилансеров
Похожие заказы
- Прикладное ПО1 заявкаЗакрыт4 года назад
- $6
Нужно выполнить следующею лабораторную работу в консольном приложении: Написать программу, реализующую иерархию классов собирателей водорослей (Collector). Собиратели бывают следующих типов: Дельфин (Dolphin) Стартовая скорость не зависит от оплаты ...
Прикладное ПО2 заявкиЗакрыт4 года назад - $50
Привет всем. Я ищу, кто может создать робота для бинарных опционов, который может автоматически торговать на binomo Этот робот должен быть в расширении Chrome или на рабочем столе, который может подключать поток данных ...
Прикладное ПОнет заявокЗакрыт4 года назад Необходимо написать программу на Python, которая решает систему диф.ур. методом Рунге-Кутты 4-ого порядка. Имеется лит-ра (15 страниц), которая описывает данную систему. И пример программы на Pascal ,на котором можно базироваться при выполнении работы. Необходимо реализовать ...
Прикладное ПО2 заявкиЗакрыт4 года назадТранспортные маршруты представлены номерами со списками остановок, заданными в порядке их следования по маршруту. Реализовать алгоритм ре- шения задачи о нахождении маршрутов для пассажира с заданной начальной остановки в заданную конечную. ИМЕЕТСЯ ПРИМЕР
Прикладное ПО1 заявкаЗакрыт4 года назадНужна программа для проверки лайков и комментариев по Хештегам в Инстаграм .В программу я ввожу тег который меня интересует , в день это может быть 2-3 тега одновременно.Программа должна писать отдельно про каждый тег такую ...
Прикладное ПО2 заявкиЗакрыт4 года назадНужен человек для выполнения контрольной работы по Java, 3 задания, нужны со скринами кода и выполненной задачи. Если можете сделать 2 из 3, то тоже пишите! Скриншот с заданиями прикрепил. .........................................................................................
Прикладное ПОнет заявокЗакрыт4 года назадРубрику возможно не ту выбрал, подскажите в лс какая более подходящая. http://joxi.ru/52aa8pDSkxMnB2?d=1 Это список опций к станкам, нужно сделать какую-нибудь опцию в каждой строке, чтобы при выборе этой опции ...
Прикладное ПО6 заявокЗакрыт4 года назадНужно написать две программы на языке Python 1. Решить задачу построения метамодели для ДКА-распознавателя. Любыми известными разработчику способами. Пояснения есть в прикрепленном файле. 2. Требуется представить описание способа определения ...
Прикладное ПОнет заявокЗакрыт4 года назадНужно реализовать форматироващик SQL на Python, который соответствует требованиям и варианту 16 из этого файла: https://iss.csc.knu.ua/files/study/bachelor-degree/metaprogramming/labs/lab-1.pdf Обратите внимание, что лексер і парсер нужно написать самостоятельно, без специализированных бибилиотек.
Прикладное ПО1 заявкаЗакрыт4 года назад