Сделать парсинг сайта на котором больше 100млн страниц, на каждой из которых по 20 записей .
Из каждой записи нужно нужно вытащить только две колонки (поля) с типом строка (до 128 символов).

API у сайта вроде нет, так что придется парсить HTML (без защиты и капчи)

Т.к. страниц и данных много, то парсинг нужно сделать многопоточным.
Условия:
1) Возможность масштабирования до N потоков (при уточнении деталей можем договориться на конкретное кол-во страниц в рамках одного потока)
2) Возможность указать с какой по какую страницу должен отрабатывать парсинг
3) Возможность поставить парсинг на нескольких серверах, но чтобы данные складывались в одну БД

Сервер(-а) для работы предоставлю. Стек на ваше усмотрение, также как и БД.

Оплата и сроки договорная.