Нужно доработать 4 парсера написанные на Python и Selenium, внедрив в них многопоточность, перебор проксей и антикапчу.
Парсинг + загрузка товаров в интернет магазин
Здравствуйте!
Нужно сделать 2 задачи.
1) Парсинг товаров с сайта.
Есть сайт поставщика https://www.dahuasecurity.com/ru и наш сайт https://reeft-shop.ru/ (движок шоп-скрипт).
На сайте поставщика очень подробная информация по товарам, но довольно запутанная. Мы хотим спарсить информацию в каком то удобоваримом формате для загрузки на сайт например csv.
Пример карточки товара https://www.dahuasecurity.com/ru/products/All-Products/Network-Cameras/Lite-Series/Full-color/IPC-HFW2439S-SA-LED-S2
Что нужно спарсить в первую очередь https://yadi.sk/i/HeYlF4WRG-RXRA
Далее характеристики.
Характеристики должны быть импортированы в магазин как пара характеристика:значение. И как правило они так и идут на сайте поставщика: https://yadi.sk/i/rStNUcO-FL5aGg
Но есть и исключения например характеристика дистанция DORI может быть такой: https://yadi.sk/i/3eeWuB8ioMVtLw а может быть и такой https://yadi.sk/i/oBHJCWWV4Q-LJA или такой https://yadi.sk/i/U23jPhQgw8ovRQ. Пока нет понимания что с этим делать - может отказаться от импорта данных характеристик. Может заменить их по какому то шаблону. Это я к тому, что есть непонятные моменты которые нужно будет решить в процессе. Пока я вижу только один с "дистанция DORI", но могут возникнуть и другие.
У Аксессуаров нужно https://yadi.sk/i/J3kPwvtUOz-kiw
И последнее изображения и файлы к товару. https://yadi.sk/i/PwSlZMiBEuEP6w
Я пробовал собрать данные через гугл таблицы - почему то не получалось получить путь к изображениям, с фалами такой проблемы не было. Не знаю может там какой то нюанс есть.
Должна быть возможность периодически делать парсинг. Как договоримся я подробное тз сделаю.
2) Далее нужно загрузить товары в интернет магазин.
Вот формат - csv https://yadi.sk/d/CEpLgxliQxkUnA
Нужно будет решить вопросы:
- загрузка аксессуаров (сопутствующих товаров)
- загрузка файлов
Сейчас такой возможности нет.
Есть готовые плагины, но со своими проблемами. Возможно, проще всего напрямую в базу данных записывать.
Цена, срок?
Заявки фрилансеров
Похожие заказы
- $205Веб-программирование5 заявокЗакрыт4 года назад
- $100
Добрый день, Уважаемые Фрилансеры! Необходимо написать Backend-программирование для корпоративного сайта, Frontend будет делаться параллельно. Необходимо сделать полностью функционал сайта, также интегрировать Frontend, также обязательна административная панель на Voyager, с возможностью корректировать весь контент ...
Веб-программирование1 исполнительЗакрыт4 года назад Сайт: https://pechatnik.by/ Нужно написать скрипт, которы бы генерировал всем картинкам в контенте страницы тег alt, если он не заполнен. Типы контента, в которых есть картинки: Галерея товара minishop2Приложение GalleryПросто картинки ...
Веб-программирование2 заявкиЗакрыт4 года назадДобрый день, Нужно привести сайт в порядок: 1) Сейчас заказ не оформляется и не приходит на почту 2) Добавить онлайн оплату 3) Сделать синхронизацию цен с 1с ...
Веб-программирование2 заявкиЗакрыт4 года назадЕсть дизайн корпоративного сайта. Свой дизайнер в штате. Нужно выполнить верстку и программирование. Это информационный сайт компании по производству оборудования. На сайте есть страницы с товарами, типа интернет магазина ( с небольшим количеством товаров - ...
Веб-программирование11 заявокЗакрыт4 года назад- $1000
Есть список правок по существующему проекту, надо их реализовать. Список вышлю кандидатам. Присылайте пожалуйста инфо о себе и своем опыте
Веб-программирование6 заявокЗакрыт4 года назад Есть Sitemap в нём все адреса страниц, защиты не будет потому что сайт наш, если вы скажете ip с которого парсите я договорюсь чтобы не блочили. Формат на выходе CSV какой ни будь. Страниц около ...
Веб-программирование1 исполнительЗавершен4 года назадпродукт позволяет установить репутацию цифрами с возможность добавления по заданным критериям. Возможности с пользовательской стороны - Повышение и понижения уровня репутации - Комментирование каждого изменения репутации - Вывод репутации в комментариях ...
Веб-программированиенет заявокЗакрыт4 года назадПоработать с МС Задача: -Нужно чтобы на сайте фото обновлялось с базы мой склад. Сейчас как я понимаю, при выгрузке фото попадают в папку сайта и оттуда подгружаются. Новые фото с МС ...
Веб-программирование3 заявкиЗакрыт4 года назадНеобходимо сделать браузерную автоматизацию на Selenium. Язык программирования Java или Python. Более детальное ТЗ выдам исполнителю.
Веб-программирование5 заявокЗакрыт4 года назад