Нужно реализовать парсер на PHP
Парсер должен менять
Proxy - можно попробовать взять отсюда https://spys.one/free-proxy-list/US/ (или я дам несколько с паролем)
UserAgent - можете использовать https://github.com/phpfail/UserAgentGenerator
Он должен состоять из 2 этапов
1 этап парсер каталога
На входе ссылка каталога. Например https://www.ebay.com/b/Mountain-Bikes/177831/bn_1867986
Нужно ходить по каталогу и записывать в базу лоты, пока не встретим уже существующий лот
-IdLots (автоинкремент)
- Title (s-item__title) прадварительно очистить от html
- Url - ссылку на лот
- Price - (s-item__price)
- operationId (парсим operationId)
- DateAdd (дата добьавление лота)
2 этап парсер лота
Дальше нужно ходить по ссылкам лотов (Url) и парсить
- Заголовок лота (h1)
- Цену
- Проставлять это (Current bid- ставка или Price - окончательная цена)
- Фотографии в максимальном разрешении (сохранять в массив)
- Месторасположение (Item location)
- Состояние (Condition)
Распарсить таблицу Item specifics, каждое значение в отдельное поле (Например https://www.ebay.com/itm/2008-Specialized-Rockhopper-Comp-Disc-29er-Mountain-Bike-17-Retail-1000/393160448598?hash=item5b8a305a56:g:UXwAAOSw8U5gOY-o название поле Vintage Значение No, название поле MPN Значение Does Not Apply ) Поля в таблицу добавлять динамически.
Мы ищем парсеров для работы как по API, так и парсинга сайтов напрямую. Данные следует хранить в MongoDB (но другие форматы будут тоже нужны). Какие данные нужно вытаскивать сообщим позже, во время переговоров.
Добрый день! Ищу full-stack разработчика, работающего с Symfony и Vuejs для реализации корпоративного веб сайта. С ТЗ можно ознакомиться здесь: https://docs.google.com/document/d/1q7ictk_VGq-Q8psBGrlTOt625m955nJHp6R-fbQoC5Q/edit?usp=sharing
Сайт для ознакомления - https://rb.gy/usfnbo Список задач: 1. Когда пользователь загружает изображения через галерею или форму заявки, их надо ресайзить. Также нужна возможность редактировать пользовательские изображения с бэкэнда. Предлагаю ...
Необходимо разработать агрегатор парсер информации о статусах, состояниях и работоспособности инвестиционных, финансовых проектов и ресурсов для заработка. С возможностью изменения информации, добавлением и удалением данных. В наличие у сервиса будет: система ...
Опенкарт 2.3 Нужно доработать мод SEO Tags Generator — автогенерация SEO-тегов для OpenCart 2.x & 3.x Сколько будет стоить добавить одно поле с переменной для Производителей? по ...
Необходимо увеличить скорость загрузки сайта. Сайт написан на lavarel 8. Необходимо довести сайт до зеленой зоны. Пожалуйста оставляйте свой телеграм для связи. Ссылку отправлю там. Для оценки цены и сроков. С уважением.
Требуется человек, который разбираться в WP Доработки нужны как по верстке так и с кодом надо будет поработать, скорее всего покажу ТЗ и все расскажу Пишите сразу сколько за час ...
Добиться 90-100% для ПК и мобильных устройств в PageSpeed Insights, исправив все ошибки. Сохранить функционал и работоспособность. Пишите стоимость в рублях РФ и сроки. Сайт greenled.ru
Здравствуйте. Исходный сайт на Wordpress, останется на этой же CMS. Задача на основе готового сайта внести ряд изменений в оформление блоков, добавить новые блоки, контактные формы и т.п. Более подробное описание предоставлю для оценки. ...
Добрый день! Необходимо добавить скрипт покупки https://yandex.ru/support/metrica/data/e-commerce.html#e-commerce__ex-purchase в модуль покупки в один клик. Внести изменения по сути в одну tpl и 1 контролер. Коммерция от аналитики уже настроена в этом окне, поэтому ...
