Описание задачи: Разработка веб-краулера на Python Цель: Создать веб-краулер (web crawler) на языке Python для автоматизированного сбора данных с веб-страниц. Краулер должен эффективно обходить заданные сайты, извлекать структурированную информацию и сохранять её в удобном формате для дальнейшей обработки. Основные задачи: Обход веб-страниц: Реализовать функционал для отправки HTTP-запросов и получения HTML-контента. Обеспечить поддержку работы с динамическими сайтами, используя библиотеки, такие как requests, BeautifulSoup, Selenium или Scrapy. Извлечение данных: Спарсить необходимые данные (текст, изображения, ссылки, метаданные и т.д.). Обеспечить корректную обработку разных форматов контента (HTML, JSON, XML). Обработка и хранение данных: Сохранение собранных данных в структурированном виде (например, CSV, JSON или базу данных). Реализация логирования для отслеживания статуса выполнения и обработки ошибок. Ограничение и оптимизация: Учет robots.txt и правил этичного парсинга. Настройка ограничения частоты запросов для предотвращения блокировок. Реализация функциональности для обхода пагинации. Требования: Опыт работы с Python и библиотеками для веб-скрапинга. Знание принципов работы с HTTP-протоколом и REST API. Понимание основ работы с регулярными выражениями и XPath/CSS-селекторами.
Необходимо разработать программу, которая будет автоматически заходить на сайт Ёбидоёби Барнаул каждые 30 минут, добавлять товары в корзину и проверять время доставки. Полученные данные нужно записывать в Google Таблицы для дальнейшего анализа.
Требуется разработка веб-скрипта для контроля посещаемости занятий учеников. Скрипт включает роли суперадмина, куратора, преподавателя и ученика/родителей. Ученики отмечают занятия, преподаватели подтверждают посещаемость и создают отчеты. Стек технологий: PHP + MySQL. Срок выполнения — до 5 дней.
Требуется разработка адаптивной веб-страницы, совместимой с десктопом, планшетом и смартфоном. Необходима работа с анимацией, реализация подписки на рассылку и интеграция простого скрипта для отображения цен. Важны хорошие навыки JavaScript, комментирование кода и реализация ленивой загрузки. Более подробное ТЗ будет предоставлено.
Требуется опытный разработчик для доработки интернет-магазина на WordPress с WooCommerce. Необходимо интегрировать оплату, добавить кнопку отправки формы с файлом и настроить вывод блоков на сайте согласно ТЗ. Задача требует стандартных манипуляций, без изменения шаблона. Цены предлагайте сами, приоритет цена/качество.
Необходимо разработать скрипт для быстрого заполнения формы с использованием Selenium и многопоточности. Время на отправку формы не должно превышать 2 секунд. Требуется локальное решение капчи, которое должно работать за 0,2-0,3 секунды. Скрипт должен поддерживать прокси для каждого потока и имитировать мобильное устройство. Имеются видео попыток и код страниц для работы.
Требуется разработать 5 уникальных шаблонов на WordPress для автосалона классических авто в США. Целевая аудитория — граждане старше 35 лет. Предоставлено предварительное ТЗ и референсы для выполнения задачи.
Необходима помощь в восстановлении изображения на сайте после запуска скрипта в консоли Google. Скрипт испортил аватарку, и требуется его удалить для восстановления. Проблема связана с картинкой, которая пропала после выполнения кода. Ожидается решение по нахождению и удалению скрипта для возврата изображения.
Требуется разработать бота, который будет автоматически записывать заявителей на визу через сайт VFS Global в Ташкенте. Бот должен выполнять авторизацию, выбирать категорию визы и периодически проверять наличие свободных слотов. При обнаружении слотов необходимо автоматически вводить данные клиента для записи.
Требуется помощь в настройке сайта по документации для его размещения в блокчейне с использованием проекта walrus. Весь контент и шаблон уже подготовлены. Ищется специалист для объяснения процесса настройки. Документация доступна для ознакомления.
Требуется провести комплекс работ по настройке сайта на платформе Битрикс 'Управление сайтом' с использованием модуля АСПРО. Основное внимание уделяется корректному отображению остатков номенклатуры и складов в торговом каталоге.
