Добрый день. Есть сайт w-home.net . При регистрации пользователи выбирают из автоподстановки свой город, который потом отображается на карте яндекс на этой странице http://w-home.net/couchsurfers . Все вроде нормально работает кроме крыма. Пример Керчь - поиск вообще ...
Серверный парсер Yandex XML с веб-интерфейсом (php или yii2)
Всем добрый день,
Есть ТЗ и прототип, высылаю после небольшой беседы.
Суть: Система парсит контент с различных сайтов, сохраняет на сервере, выводит через веб-интерфейс. Три вида контента:
1. Тексты. Источники текстов - сайты из топа яндекс.xml по списку ключевых фраз. В настройках XML тип поиска "мировой", стандартный лимит 10К запросов в сутки. Как оказалось, одного аккаунта достаточно для проекта.
2. Картинки с yandex.ru/images/. Даже на простой запрос через file_get_contents, Яндекс сразу отдает пачку url'ов картинок. Хотя капчу тоже начинает отдавать, даже при 3 запросах в час. По картинкам планируется около 200 запросов в сутки. На один запрос нужен результат примерно 20 картинок, максимум 100. Можно из google. По пункту 2 я расчитываю на ваш опыт.
3. Видео с youtube, тоже поиск по запросам, примерно 100 запросов в сутки, нужны только url'ы. Вроде как можно через API: https://developers.google.com/youtube/v3/code_samples/php#search_by_keyword
Прокси будут закупаться. Потребуется поддержка cookies и антикапчи, и, скорее всего, headless-браузер.
Пишите сразу, был ли увас подобный опыт или хотя бы что-то похожее. Рассматриваю предложения от работников с плюсами, регистрация от полугода.
Смутно представляю трудозатраты, поэтому называйте примерный бюджет, если хотите.
Заявки фрилансеров
Похожие заказы
- Веб-программирование1 исполнительЗавершен8 лет назад
Нужен программист PHP для работы над действующими проектами. Опыт работы написания плагинов Wordpress с нуля. Знание таких систем как JustClick, Roistat. Опыт работы на Yii2? В существующем и активно развивающемся ...
Веб-программирование9 заявокЗакрыт8 лет назадДля поддержки нескольких проектов преимущественно на Yii2 нужен программист. Требуемые знания: PHP, MySQL, Yii2, git. Также желательно знание Jquery, Bootstrap (верстка требуется по месту, без необходимости верстать полные макеты). Проекты ...
Веб-программирование10 заявокЗакрыт8 лет назад-скопировать оболочку сайта -пройти авторизацию на скопированном сайте -вывести нужные цифры в личном кабинете после авторизации
Веб-программирование1 исполнительЗавершен8 лет назад- $10
Требуется внести правки на лендинг albatros.rent 1. Заказать обратный звонок – после отправки заявки – выдает ошибку 2. Когда кликаешь на «контакты» - сделать что бы самый конец страницы сайта открывался ...
Веб-программирование1 исполнительЗавершен8 лет назад - $30
Требуется сделать адаптив для сайта экспертсити.рф. Сайт на wordpress. Конкретизирую: требуется сделать адаптивную верстку, макетов нет и требований особо тоже нет. адаптируйте так, как удобно вам, претензий не будет при условии корректного отображения верстки ...
Веб-программирование1 исполнительЗавершен8 лет назад - $5
Задача не большая. Только для хорошо разбирающихся программистов.
Веб-программирование9 заявокЗакрыт8 лет назад Есть документация: https://developers.facebook.com/docs/marketing-api/guides/lead-ads/retrieving/v2.9 Мне нужно получать по крону список лидов с их всеми полями. Оплата только после проверки результата! я хотел бы получить подробнейший мануал к ...
Веб-программирование2 заявкиЗакрыт8 лет назадНастроить баннерную рекламу на сайте с Joomla
Веб-программирование1 исполнительЗавершен8 лет назад- $10
нужно поправить сайт на вп все эти не нужные надписи http://www.relo-move.com/
Веб-программирование9 заявокЗакрыт8 лет назад