Разработка модуля скраппинга

Цена договорная
25 июня 2020, 18:40 • 11 откликов • 77 просмотров
Необходим модуль сбора информации (скраппинга) из профилей пользователей с сайтов социальных сетей. Известно, что такие сайты тщательно защищают эту информацию и блокируют сбор информации которая происходит не через API.Блокировка происходит, как правило, из за повышенного количества запросов с одного IP.

Требования к модулю:
  1. Программная среда python 3.5-3.8
  2. Наличие защиты от блокировки. Как вариант, модуль должен работать в многопоточном режиме через динамический список прокси (число прокси до 30).
  3. Длительная, бесперебойная работа модуля при периодичности запросов 1 запрос в секунду.
  4. Рабочей нагрузкой модуля является функция сбора следующей информации из профиля пользователя:
    1. Полное имя
    2. Возраст
    3. Пол
Функция полезной нагрузки должна быть хорошо документирована и поддерживать расширяемость.
Возможно использование уже готовых решений, которые могут быть адаптированы под требования данной задачи.

Если вы готовы разработать данный модель, прошу дать вашу оценку стоимости разработки.