Техническое задание: парсер УРЛов выдачи Поисковых Систем
Необходимо написать универсальный парсер для сбора информации с основых поисковых систем Интернета.
Предпочтительным является язык программирования: PHP
Обязательно, чтоб результаты парсинга сохранялись в базе данных MYSQL
Основные характеристика парсера:
* Скрипт должен уметь парсить по заданному ключевому слову основные поисковые системы Интернета (Яндекс, Гугл, Рамблер)
* Можно выбирать как одну поисковую систему, несколько, либо же все сразу (выбор должен подтверждаться чекбоксами)
* Обязательным является также возможность парсинга по блогам, картингам, новостям, RSS и видео (соответственно юзеру должен быть предоставлен выбор парсинга простой выдачи, по блогам, картинок и т.д. или все сразу - также чекбоксы)
* Также в скрипте должна быть возможность указывать глубину парсинга (т.е. до какого места в выдаче должен работать скрипт)
* Обязательна возможность парсера работать с прокси (список прокси будет браться из просто тхт файла)
* Если в выдаче по разным ПС встречаются одинаковые УРЛы скрипт должен удалить повторения перед записью в БД
Вся полученная информация должна сохранятся в таблице со следующей структурой
1. ID
2. УРЛ ссылки
3. Место в выдаче
4. Поискова система
5. Заголово сайта
Результаты парсинга по выдаче должны сохранятся в одну таблицу, по РСС в другую, по видео в третью, по новостям в 4-у и т.д. Все должно хранится отдельно.
Необходимо убрать флеш-картинку и на ее место вставить готовую gif-ку. Доработать портфолио - сделать не полное отображение фотографий, а несколько фотографий и кнопку "далее" для просмотра всех остальных фотографий. Бюджет - ...
Сайт www.compas.in.ua Есть пожелания по доработке данного сайта (изменения в текущем состоянии) + реализация дополнительных возможностей. Два основных требования: 1. Предложения принимаются только от проживающих в Киеве 2. Ценовая политика ...
Нужен компонент для Joomla 1.0 для туристического сайта. Краткое описание функционала: - Вывод списка туров с разделением по странам - Подбор тура по параметрам (дата вылета, кол-во дней, город вылета, ...
Нужно написать модуль библиотеки для сайта, То есть с админ панели администратор мог добавлять к книгу не сам файл а именно текст с файла, и эти книги отображались в панели пользователя. Сроки ограничены 1 ...
Нужен скрипт который заходит на сервер и заливает файлы во все домены которые есть на этом сервере Расчет через сервис безопасных сделок. Скрипт готов за 1 день 1700 руб ...
Надо несколько модулей написать для Joomla 1.0 Цель найти человека специалиста который бы имел опыт работы в написании различных модулей и компонентов. Хотел бы узнать порядок цифр и увидеть ...
Нужен специалист по движку Oscommerce. 1. Необходимо сайт (один) перенести на другой домен. 2. В текущем сайте (другой) www.pocyda.ru - в админке добавить некоторые функции. Например, статистика продаж, распечатка счетов-фактур и ...
Нужна помощь! в форме при отправке на е-майл файлы не прикрепляются к письму!
По неким (достаточно обоснованным) причинам текущий исполнитель не может закончить 2 проекта (хотя работать с ним было очень приятн) Есть все исходники Дизайн утвержден (нужны только мелкие правки) Нужно закончить ...
Необходимо написать два несложных скрипта на php. ТЗ в приложении, очень желательно сегодня, оплата в webmoney.
