Спарсить данные с Яндекс.Маркет

Цена договорная • наличный расчёт, электронные деньги
18 апреля 2014, 13:21 • 7 откликов • 63 просмотра
Необходимо спарсить все данные c market.yandex.ru в базу данных mysql.

Список данных, подлежащих парсингу:

1) структура каталога товаров
2) структура регионов
3) магазины, включая местоположение и рейтинг
4) сами товары с фото, если фото есть
5) отзывы о товарах и магазинах
6) обсуждения

Требования к самой системе парсинга:

1) нужен редактор категорий товаров - чтобы можно было менять структуру категорий, переименовывать их, менять порядок, и чтобы товары при этом перемещались соответственно
2) нужна админка с возможностью следить за пополнением базы
3) возможность работать с миллионами товаров - система должна быть быстрой, оптимизированной и без тормозов
4) система должна уметь парсить быстро, при необходимости задействуя прокси
5) средства разработки - PHP и mysql
6) можно парсить через HTTP или API яндекса - на Ваше усмотрение, нас интересует скорость разработки системы и скорость парсинга данных

Платные прокси и быстрый сервер обеспечим.

От Вас необходимо:

- понимать, что за результат принимается не написание системы как таковой, а получение всех нужных данных
- иметь опыт подобной работы (желательно с примерами)
- назвать стоимость работ и сроки
- оценить скорость скачивания (сколько товаров может быть скачано за сутки)
- уметь выдерживать назначенные сроки