Требуется разработать универсальный способ парсинга меню ресторанов с различных сайтов. Необходимо собрать списки блюд, фотографии и другую информацию, учитывая специфику каждого сайта. Использование ИИ для автоматизации процесса будет плюсом. Оплата возможна как за проект, так и почасово.
Спарсить ссылки из vk
Сделать код на python для сбора данных с vk.com и скачать и сохранить сырые данные на диск и разобранные в БД по списку ссылок (всего около 3000 ссылок) . Ссылки выглядят примерно так:
https://[m.]vk.com/wall-987654321_123456789
https://[m.]vk.com/clip987654321_123456789
Нужно собрать данные в БД (sqlite, структуру БД я пришлю позже):
- url, по которому собираются данные
- имя пользователя
- профиль пользователя
- метрики профиля пользователя (друзья, подписчики и т.д.)
- дата/время публикации
- фотографии/видео (сохранить в каталог media)
- текст описания
- количество просмотров/лайков/реакций/комментариев на публикации
- текст комментариев
- тип публикации
- имена пользователей, поставивших лайки, оставивших комментарии
- другие доступные метрики
- статус публикации (скачался/не скачался/удален с VK)
Этапы работы скрипта:
1. Скачиваются и сохраняются данные, соответствующие url по списку (фото/видео сохраняются в каталог media, страницы, которые отдает сервер в каталог responses). Скрипт должен понимать, что скачивание прервалось и уметь докачивать то, что не докачалось. Так же нужен текстовый лог errors.log, если что-то не скачалось из-за ошибок или пост уже удален
2. После того, сохранение завершено, парсятся сохраненные результаты и затем складываются в БД (с указанием на то, из каких файлов они были получены)
Результат работ:
1. zip архивы с неразобранными данными (media.zip, responces.zip)
2. Файл vk.sqlite с распарсенными данными
3. Файлы с исходнимами скрипта, errors.log, логин/пароль от аккаунта, если скрипт работает через API.
=======================================================================
ВАЖНО: Предоплат нет. Оплачивается только полностью выполненная работа со всеми правами. Возможна безопасная сделка.
ВАЖНО: Сразу указывайте цену и срок. Предложения типа «Обращайтесь, договоримся» не рассматриваются и означают, что вы не читали описание проекта!
=======================================================================
Заявки фрилансеров
Похожие заказы
- Веб-программирование11 заявокОткрыт11 часов назад
Ищется разработчик для бэкенд-части образовательного приложения на Node.js и TypeScript. Задачи включают расширение функционала словаря, внедрение новых ролей пользователей и создание модуля уведомлений. Опыт с PostgreSQL и интеграцией API обязателен. Проект рассчитан на 3 месяца.
Веб-программирование7 заявокОткрыт16 часов назадНеобходим специалист по веб-программированию для создания интеграции с системой Opera PMS. Ищем профессионала с опытом работы в данной области для успешного выполнения задачи.
Веб-программирование2 заявкиОткрыт19 часов назад- $10
Требуется разработать скрипт, который предотвратит отслеживание вашей ленд-страницы сервисом Tyver. Ожидаются предложения с ценами от исполнителей с опытом в веб-программировании.
Веб-программирование9 заявокОткрытдень назад - $5
Требуется корректная установка темы админки на OpenCart 3. Файлы будут предоставлены. Необходимо устранить конфликты, возникающие при установке через ocmod, чтобы панель админки работала корректно.
Веб-программирование2 заявкиОткрытдень назад - $500
Требуется выполнить импорт данных сайта из Shopware на платформу WooCommerce. Проект включает поддержку 6 языков. Необходима опыт в веб-программировании и знание обеих платформ для успешной миграции данных.
Веб-программирование6 заявокОткрыт2 дня назад - $50
Требуется программист для исправления кода анимации со скроллом на GSAP. Срок выполнения - до конца дня. Обсуждение условий и деталей в личной переписке.
Веб-программирование5 заявокЗакрытдень назад Требуется редактирование существующего сайта на платформе WordPress. Ожидаются изменения и доработки для улучшения функциональности и дизайна. Подробности доступны в документе.
Веб-программирование9 заявокОткрыт2 дня назадИщется опытный разработчик для создания Telegram-бота для торговли токенами в сети Solana. Необходимы знания Rust, Solana SDK и интеграция с Jupiter Aggregator API. Бот должен поддерживать функции покупки и продажи токенов, управление позициями, безопасное хранение кошельков и реферальную программу. Приветствуются примеры реализованных проектов.
Веб-программирование8 заявокОткрыт2 дня назадТребуется внести небольшие изменения в логику работы сайта на платформе NetCat. Необходимы правки по шаблонам, а также вывод дополнительной информации и прайсов. Верстка не требуется, она будет выполнена отдельно.
Веб-программирование3 заявкиОткрыт2 дня назад