Парсер выдачи яндекса

  1. Биржа фриланса
  2. Веб-программирование
Закрыт4 заявки284 просмотра

Требуется написать скрипт, который будет парсить выдачу яндекса по ключевым словам из списка.

Скрипт будет лежать на vds (unix), к vds будет прикуплено порядка 100 IP - если надо то и значительно больше(т.к. яндекс банит запросы то нужно соотвественно предусмотреть оптимальную работу - задержки и т.д.), база слов будет ооочень большая, порядка нескольких десятков милионов слов, каждый с новой строки. Из выдачи берутся только домены, вторая часть скрипта отсеивает дубликаты доменов.

Т.е. по сути нам нужно выпарсить домены проиндексированные яндексом, притом чтобы это не затянулось на год. Количество запросов которое произведется будет порядка 800 милионов запросов к яндексу(понимаю что скрипт будет работать не одну неделю чтобы выполнить эту задачу) :)

Указывайте пожалуйста цену, вариант как и на чем это будет реализовано.

P.S. задачи парсинга требуются часто, так что возможно долговременное сотрудничество.

16 лет назад
Borodach
Олег 
42 года
18 лет в сервисе
Был
3 года назад

Заявки фрилансеров

Нет заявок фрилансеров