Proxy\SOCKS парсер и чекер

$70
  1. Биржа фриланса
  2. Веб-программирование
Закрыт7 заявок719 просмотров

Необходимо написать скрипт, который будет парсить прокси из заданных источников (в формате IP:PORT) и в многопоточном режиме проверять собранные прокси на анонимность. Вся работа должна осуществляться с текстовыми файлами, без использования БД.

Источники указываются следующим образом:

1. список ресурсов, в котором каждый сервер должен проверяться на поддержку и прокси, и сокс

2. список ресурсов только для прокси

3. список ресурсов только для сокс

4. в идеале еще должен быть список ресурсов, по которым парсер должен пройтись на указанное количество вложенных страниц вглубь и собрать прокси с них (форумы)

Необходимый функционал:

- предварительный пинг сервера для ускорения процесса

- возможность вручную проставлять таймаут запроса

- возможность добавления списка прокси в очередь проверки вручную, а также однократная проверка в случае необходимости с выводом рабочих проксей по результатам проверки

- возможность доступа к списку через браузер

- возможность экспорта списка в текстовый файл через админ-панель

- возможность загрузки файла на удаленный фтп-сервер (через крон)

- чтобы HTTP, HTTPS, SOCKS экспортировались в разные списки

- валидные прокси собираются отдельно и перепроверяются при следующей проверке

- собирается одна большая база напарсенных проксей для коллекции и в идеале архивируется :)

- чекер должен проверять прокси на анонимность и корректность GET и POST запросов

-> при экспорте должны быть чекбоксы, какие прокси будут экспортироваться (все, либо только те, которые работают с методом POST)

Необходимо, чтобы чекер проверял как минимум несколько тысяч прокси в час на VDS и по возможности поменьше грузил сервер.

Главное - функционал, красота админки не имеет значения :)

Указывайте сроки исполнения.

17 лет назад
yusufov
Руслан 
45 лет
19 лет в сервисе
Был
17 лет назад

Заявки фрилансеров

Нет заявок фрилансеров

  • Похожие заказы

  • Разработка/доработка CMS

    Есть движок собственной разработки нужно либо доработать его к конкретным проектам (нескольким корпоративным сайтам и интернет-магазинам), или можете предложить свою CMS, котрую вместе (читай за наши деньги:-) и доведем). Предполагается длительное сотрудничество ...

    Веб-программирование17 заявок
    Закрыт
    18 лет назад

  • Интеграция портала и системы документооборота

    $1500

    Система «Дело» в БД Oracle хранит регистрационные карточки (далее РК) документов, эти же карточки необходимо разместить в БД Oracle проудкта Alfreso. Alfresco интегрирован с LifeRay. Необходимо разработать ...

    Веб-программирование14 заявок
    Закрыт
    18 лет назад

  • Веб доступ к базе данных MSSQL 2005

    Имеется программа-клиент просмотра и редактирования данных из одной таблицы БД MS SQL 2005 Необходимо создать аналогичную систему для удаленного доступа к БД через веб-браузер и создать интерфейс поиска, просмотра и ...

    SQL
    Веб-программирование25 заявок
    Закрыт
    18 лет назад

  • Скрипт управления ссылками на сайте

    $1000

    Здравствуйте! Необходимо написание скрипта управления ссылками на сайте. К проекту составлена проектная документация - 20 страниц А4, поэтому ниже кратко описана структура и функциональность, ТЗ высылается на условиях конфиденциальности ...

    AJAXCSSMySQLPHP
    Веб-программирование1 исполнитель
    Закрыт
    18 лет назад

  • Редактирование flash исходника

    $50

    Заменить фотографии. Отредактировать фотографии (8 шт.). Сменить шрифт на русский. Стереть текст с одной страницы. Усилить подсветку шапки. Исходник тяжелый - в архиве 20 мб. Лежит на хостинге. ICQ 459636988

    Веб-программирование1 исполнитель
    Завершен
    18 лет назад

  • Web-mail интерфейс для DLE

    $50

    Необходимо создать web - интерфейс для чтения\отправки почты для DLE. Основные функции: - регистрация пользователя через DLE т.е. если пользователь зарегистрировался на сайте ему приствивается почтовый экаунт - чтение\отправка почты ...

    DLE
    Веб-программированиенет заявок
    Закрыт
    18 лет назад

  • Разработка приложения на Flash

    Программа «Визуализация локально-вычислительно сети» должна представлять собой приложение(на флеше), отражающий план здания и месторасположение компонентов ЛВС в динамическом состоянии(работает/не работает). Приложение должно работать в 2х режимах. 1) Режим клиента 2) Режим администратора ...

    Веб-программирование6 заявок
    Закрыт
    18 лет назад

  • Интернет магазин с двумя каталогами

    $1000

    - Должен быть построен на базе скрипта интернет-магазина (osCommerce, etc) или мощной CMS, которая это умеет. - Магазин имеет два независимых каталога товаров, но единую корзину и базу пользователей. - Магазин на Русском ...

    Веб-программирование1 исполнитель
    Завершен
    18 лет назад