Москва

Россия

Язык разработки — Python, СУБД — MySQL.

Нужно написать 4 фетчера/парсера. 3 — простые однопоточные, запускаемые по расписанию. 

1. Скачивание и обработка .csv
2. Использует Flikr API (одну функцию)
3. Последовательно скачивает несколько HTML страниц, сохраняя в БД точно определенные данные.

И четвертый — сложнее: многопоточный, работающий как демон, отдающий свое API при помощи OmniORB (один метод с параметрами), запускающий закачки в отдельных тредах и парсящий их при помощи Universal Feed Parser.

Есть нормальное, достаточно низкоуровневое ТЗ.

Язык разработки — Python, СУБД — MySQL.

Нужно написать 4 фетчера/парсера. 3 — простые однопоточные, запускаемые по расписанию. 

1. Скачивание и обработка .csv
2. Использует Flikr API (одну функцию)
3. Последовательно скачивает несколько HTML страниц, сохраняя в БД точно определенные данные.

И четвертый — сложнее: многопоточный, работающий как демон, отдающий свое API при помощи OmniORB (один метод с параметрами), запускающий закачки в отдельных тредах и парсящий их при помощи Universal Feed Parser.

Есть нормальное, достаточно низкоуровневое ТЗ.

Дмитрий zubov

Python, скачивание и обработка