Парсинг большого сайта по недвижимости

  1. Биржа фриланса
  2. Веб-программирование
Закрыт7 заявок230 просмотров
Найдите исполнителя для вашего проекта прямо сейчас!
Разместите заказ на фриланс-бирже и предложения поступят уже через несколько минут.

Необходимо выпарсивать страницы по объектам недвижимости на сайте https://www.realtor.ca и заносить их в базу данных.

У каждого листинга есть свой уникальный код MLS. В начале номера иногда добавляется«C» или «W». Например, C4131916.

Предварительно методом перебора надо получить первичную информацию по номеру MLS. Всего в базе сейчас около 1 100 000 записей. Для каждого объекта недвижимости нужно получить следующие поля (в скобочках

примерные значения):

·        MLS Number (C4131916)

·        Адрес, который разбить по полям

o  Адрес (# 707 -4673 JANE ST)

o  Город (Toronto)

o  Провинция (Ontario)

o  Индекс (M3N2L1)

·        Стоимость аренды (1500)

·        Стоимость продажи (500000)

·        Количество спален (4+2)

·        Количество ванных комнат (3)

·        Property Type – тип недвижимости (Single Family)

·        Title (Condominium/Strata)

·        Building Type (Apartment)

·        Parking Type (Underground)

·        Community Name (Black Creek)

·        Neighbourhood Name (Manordale)

·        Storeys (2)

·        Built in – дата постройки (1961)

·        LandSize (69.9 ft X 100 ft)

В будущем количество полей может увеличиться.

После наполнения первоначальной базы надо будет каждый день перезакачивать информацию по существующим ID и отслеживать факт продажи/сдачи. Также проверять добавление новых листингов и тоже их закачивать.

Потенциальные проблемы:

·        Вероятность блокировки по большому количеству запросов

·        Сложность обращения напрямую к объекту недвижимости по его MLS коду.

В первой версии достаточно сохранять выпарсенные данные в текстовые файлы.

По всем вопросам пишите в личку. Если их нет, указывайте срок и цену.

7 лет назад
iEmployer
Алексей 
46 лет
17 лет в сервисе
Был
2 дня назад

Заявки фрилансеров

Нет заявок фрилансеров

  • Похожие заказы

  • Переделать слайдер

    $8

    Есть слайдер, нужно либо довести до ума, либо если у вас есть подобный, отредактировать под требования. Условия: - адаптивный (в том числе для листания тачем в телефоне) - максимальная высота ...

    Веб-программирование5 заявок
    Закрыт
    7 лет назад

  • Сайт-афиша

    есть сверстанные страницы на react js нужно интегрировать и написать бек-енд на выбранной технологии примерно логика понятна по изображениям админки не будет все будут заходить через сайт суперадмин будет ...

    JavaScript
    Веб-программирование4 заявки
    Закрыт
    7 лет назад

  • Натянуть шаблон на сайт Drupal

    $25

    Необходимовот такой шаблон https://www.templatemonster.com/ru/demo/53149.htmlнатянуть на сайт с Drupal 7 (подогнать  под такой же внешний вид, как указан в ссылке,с небольшой корректировкой под необходимые требования). Подробнее – в личной переписке. Просьба озвучивать ваши цены в ...

    DrupalHTML
    Веб-программирование1 исполнитель
    Завершен
    7 лет назад

  • Установить регпанель

    Здравствуйте.  Требуется установить рег.панель на сайт.  Дистрибутив тут:  https://www.reg.ru/reseller/regpanel/ Сайт находиться на хостинге джино.  Важно, чтобы панель работала.  Предлагайте цену и сроки.

    Веб-программирование3 заявки
    Закрыт
    7 лет назад

  • Поменять ИОФ на ФИО

    Здравствуйте. Есть интернет-магазин на вебасист. Данные заказчика поступают в формате Имя Отчество Фамилия. Нужно сделать классическую последовательность Фамилия Имя Отчество.  Данный вопрос обсуждался вот здесь  https://support.webasyst.ru/2377/nuzhna-posledovatelnost-familiya-imya-a-ne-imya-familiya/

    Веб-программирование4 заявки
    Закрыт
    7 лет назад

  • Импорт xls прайс листа в WP woocommerc

    Есть прайс лист в xls формате , его требуется обновлять каждодневно на моем сайте.  Обновляется цена и наличие товара. Если вы откроете прайс листа то увидете что у каждого товара есть своя категория товара. ...

    WordPress
    Веб-программирование7 заявок
    Закрыт
    7 лет назад