Создать Бот-парсер

Веб-программированиеЗакрыт4 заявки22 просмотра
Найдите исполнителя для вашего проекта прямо сейчас!
Разместите заказ на фриланс-бирже и предложения поступят уже через несколько минут.

ТЗ-1
Разработка ПО способного понять как парсить информацию с разных сайтов имеющих такие значения как: рейтинг, кол-во отзывов.
Должен состоять из разработанных трёх модулей.
1) Модуль управления сайтами (добавить, изменить, обучить работе с элементами сайта)
2) Модуль управления расписанием запусков (как часто нужно запускать сбор данных)
3) Модуль обработки и вывода результатов в гугл таблицу
Модуль 1 нужен так как парсер для Яндекса, Отзовика, Флампа, 2Гис, IRecommend, десяти разных HR сайтов, Google maps, Авито, рейтинги сайтов из поисковика (4 разных сайта), Farpost, ru.otzyv, vseotzyvy, otzyv-top, otzyvru, spr, Yell. ( Подводный камень задачи - SPA сайты, Яндекс.Карты и Google Maps тоже к ним относятся. У таких сайтов рендеринг происходит не на стороне сервера, а со стороны реактивного клиента. Т.е под них нужно писать полноценных роботов, с контролем браузера)

ТЗ-2
Разработка ПО или сервиса, для копирования форумных веток.
Ожидаем:
1) Окно, в которое вносится с новой строки прямая ссылка на форумную ветку, оговорённых заранее форумов. Возможность выбрать откуда и куда парсер перетягивает тексты комментариев.
2) Указание парсеру брать информацию от даты Х до даты Y или в режиме от даты Х до новых сообщений в реальном времени (2 режима, срез по датам или онлайн парсер).
3) Подстраивание текстов комментариев форума-донора под формат текстов наших форумов с использованием нашей БД авторов (аватарки, дата регистрации, стаж/титул, логин и прочая необходимая информация для встраивания нового сообщения в наш форум)
4) Возможность работы парсера 24/7 на сервере
5) Использовать нашу БД аккаунтов каждого сайта.
6) Создание переключателя в настройках по генерации или переработке спарсенного текста ИИ. Либо их отключение и прямая выгрузка текстов сообщений с сторонних форумов без изменений текстов

месяц назад
guest_1716538972161
Россия
месяц в сервисе
Была
месяц назад