ОС Centos 6.4 x64. MySQL 5.2; среда разработки IDE – Eclipse 3.3 с расширением Liferay IDE 1.6.1; Дополнительные средства разработки Oracle JDK 6; Компиляция и сборка приложения – Liferay SDK 6.1, Liferay Portal Sources ...
Система для сбора тайтлов для 4 млн веб страниц, node.js
Есть база из около 4 миллионов URL. Нужно на node.js, примерно как описано тут:
http://letsnode.com/example-of-what-node-is-really-good-at
сделать систему, позволяющую собирать тайтлы для имеющихся адресов.
Важно собирать информацию именно асинхронно, потому что операцию надо будет время от времени повторять и она должна занимать минимальное время.
Тайтлы должны собираться в базу mysql, и к этой базе должен быть открыт доступ из phpmyadmin.
База должна быть такая:
адрес
тайтл
код ответа веб-сервера (если ответа нет, то null)
Всё это должно работать на Windows.
Как всё должно работать:
1. Я завожу VPS сервер на Windows
2. Вы туда устанавливаете node js, phpmyadmin
3. Пишете код, проверяете тестовой базой в 1 тыс. адресов, сообщаете что все ок и пишете мне, в какое место положить файл с реальной базой и как запустить процесс
4. Я заливаю на сервер реальную базу, запускаю процесс, как он завершается - я проверяю с помощью phpmyadmin, что все ок и расплачиваюсь.
Нужно все тайтлы привести к одной кодировке (юникодной), независимо от кодировки сайта.
Также нужно учесть редиректы - и брать тайтл с первого редиректа, дальше по цепочке редиректов идти не надо.
Пишите цены и сроки.
К срокам прошу относиться серьёзно и указывать сроки в календарных днях.
Заявки фрилансеров
Похожие заказы
- $1000Веб-программирование1 заявкаЗакрыт10 лет назад
- $10
Есть интернет магазина Joomla. И по каким то причинам, когда человек оформляет заказа, не у всех появляется кнопка оформить заказа для завершении покупки.
Веб-программирование1 заявкаЗакрыт10 лет назад На сервер идет много запросов. Сайт тормозит. Определить причину - исправить. Лог - https://yadi.sk/d/I3dc4GvEdHCJu
Веб-программирование5 заявокЗакрыт10 лет назадТребуется внести изменения на сайты, согласно ТЗ. ТЗ прилагаю. Скидывайте свои заявки с обязательным указанием цены и сроков.
Веб-программирование4 заявкиЗакрыт10 лет назадТребуется создать калькулятор рассчета стоимости монтажа оборудования. Сайт сделан на Amiro CMS
Веб-программирование2 заявкиЗакрыт10 лет назадПосле переноса сайта на новый хостинг сайт перестал работать. Сайт на старом хостинге: http://abc-realty.tom.ru/ Как выглядит на новом, показано на скриншоте во вложении.
Веб-программирование1 исполнительЗавершен10 лет назадНужно добавить банковскую оплату на Opencart по Европе. То есть что бы принимали карты Visa и Mastercard и банки. И что бы деньги переводились на мой счет. И была возможна оплата товара через интернет банк ...
Веб-программирование1 заявкаЗакрыт10 лет назадhttp://metodistmatematik.ru 1) Сайт на модх. В шапке картинка 980*349 указана при верстке, а я меня картинку шапки и хочу уменьшить ширину шапки 980*349. Раньше на сайте на этом же шаблоне у меня ...
Веб-программирование1 исполнительЗакрыт10 лет назадЕсть сайт brusland.tmweb.ru/ Требуется натянуть страницу brusland.tmweb.ru/strojma... на modx Сейчас на этой странице просто верстка
Веб-программирование1 исполнительЗакрыт10 лет назадПроект небольшой, но имеет много тонкостей. Подробности напишу кандидату. Дедлайн 31 декабря, в связи с этим основному разработчику нужна поддержка. Вы идеальный кандидат, если умеет работать с Yii Framework 1.X, MySQL ...
Веб-программирование5 заявокЗакрыт10 лет назад