Требуется написать парсер для 3-х сайтов

25 000 руб. за проект
08 января 2020, 17:45 • 32 отклика • 195 просмотров
Требуется написать парсер для 3-х сайтов (цена указана за один сайт):
https://kad.arbitr.ru
https://bankrot.fedresurs.ru
http://fssprus.ru/iss/ip
Также адаптировать написанные разработчиком парсер, если сайты будут меняться.
Все сайты "сопротивляются" парсингу, но варианты обойти есть. Существуют готовые парсеры (http://parser-api.com/kad-arbitr-ru, http://parser-api.com/bankrot-fedresurs-ru, http://parser-api.com/fssprus-ru). Но нам принципиально размещать код на собственных серверах и использовать собственные прокси (ну и без абонентской платы).

На наш взгляд, среднее время реализации парсера при должной подготовке 3-4 дня. Мы предлагаем оплату через безопасную сделку.

Основная задача состоит в том, чтобы парсить данные стабильно, быстро и незаметно для сайтов, язык на котором вы будете писать не важен, нужно выбрать оптимальный под каждый сайт.


Все парсеры должны работать через приватные прокси airsocks. Перед каждым запросом должна происходить смена IP адреса. Настройки прокси хранить в файле конфигурации для каждого скрипта. Для обхода капчи на fssprus.ru желательно использовать Ru-Capcha, если это возможно.

Парсеры должны отрабатывать не менее 10 000 запросов в день.

При каждом запросе парсер должен возвращать JSON-файл с содержимым, либо информацию об ошибках возникших при парсинге. Формат выходного файла и параметров HTTP-запроса подробно описан в ТЗ.


Отзывы
Аноним
 
4 года назад