Суть такая.

1. Скрипт сборщика обязательно должен быть написан на perl в многопоточном режиме (число потоков задается в переменной)

2. Цикличный обход по ссылкам (берутся из базы данных) с контролем что по ссылке уже ходили и контролем на повторяемость ссылок в самой базе. ссылки в базе только уникальные. Цикличность бесконечная, закончил обрабатывать заданное число потоков ссылок, берет следующию порцию из базы.

3. Возможность работы скрипта через Proxy сервера в формате xxx.xxx.xxx.xxx:порт (прокси сервера берутся из таблицы базы MySQL) число используемых прокси задаётся в переменной скрипта.

4. Скрипт должен быть хорошо комментирован, дабы понимать что и как работает.

5. Подключение к базе данных MySQL прописываются в переменных скрипта.

6. Если в анализируемой странице встречаются внутренние ссылки, перед записью в базу обязательно дополнить из доменным именем сайта со страницы которую анализировали.

Параметры сервера: FreeBSD 7.2, Perl 5.10

Если необходимо до установить модули Perl автор обязуется написать версии модулей и ссылки где их брать.

15 лет назад
hiddensy
Кирилл 
44 года
18 лет в сервисе
Был
15 лет назад

Заявки фрилансеров

Нет заявок фрилансеров
  • Похожие заказы

  • Добрый день! требуется создать систему для рассылки смс\ммс с подменой номера. отправка смс из базы. нужно сделать панель для заполнения номеров и тд привязка номеров к продавцу. т.е если омега делает свою ...

    Закрыт
    13 лет назад
  • Добрый день! Требуется создать систему быстрого развертывания интернет магазинов магазинов. Требования - быстрота работы. - создание магазина на поддомене и приравнивании к основному (me.magaz.ru-поддомен и vasya.ru-основной домен) - статистика ...

    Закрыт
    15 лет назад
  • Смс-ключ работает - Вот так отображается скрипт http://free-load.biz/0001.php Нужно изменить title, сделать так чтобы сверху не было картинки SmsCoin и внизу не было надписи СМС-услуги предоставлены SmsCoin | Сообщить о проблеме. ...

    Закрыт
    15 лет назад
  • РАДИОКНОПКИ скрыть функцией filter:progid:DXImageTransform.Microsoft.Alpha(opacity=50); Вместо кнопок показывать картинки. При выборе определенной кнопки - картинка меняется на активную, а та, что была активной становится не активной. С возможностью простого добавления бОльшего ...

    Завершен
    15 лет назад
  • Есть база загородной недвижимости, нужно сделать 3 вещи. 1. Общая карта – где в одном месте выводятся все позиции как тут http://www.cottage.ru/maps/ (картиночку домиков дам) 2. Сделать карту, где будет выводиться только один объект, например ...

    Закрыт
    15 лет назад
  • $20

    Установил скрипт тизерки но вот что-то не полноценно всё работает. Файлы точно все рабочие не пойму что к чему. Нужен php прогер который быстренько разберется что к чему и поднастроит там все на место поставить. ...

    Завершен
    15 лет назад
  • Нужно адаптировать код вывода ссылок php на подобе сапы, только от другой партнерки для движка даталайф. вот описание с партнерки(перевод с английского) Инструкции Установка PHP # Создайте файл ...

    Закрыт
    15 лет назад