Доработать скрапер на node.js для GIS ресурса

10 000 руб. за проект
24 марта 2022, 19:58 • 1 отклик • 8 просмотров
Реализован скрапер данных с GIS ресурса на node.js.

В сетапе используется 3 ноды Elasticsearch

Скрейпер работает как "сканер", который окнами в 256х256 проходит по области карты, с шагом в 128, с отсевом дубликатов, и записывает ИЛИ обновляет старые данные если они есть по ID

Необходимо:
Обновить базу полигонов + boundary координаты каждого полигона, что бы мы смогли воссоздать обновленную карту на своем ресурсе
- проверить формат импортируемых данных полигонов датасета BidangTanah. Доработать/обновить скрапер если формат/api на ресурсе были изменены;
- реализовать автоматизацию/потоковый сбор данных;
- доработать скрапер на предмет не сканирования пустот;
- доработать склейку получаемых полигонов (так как сканирование производится в областях квадратов, участки попадающие на границы режутся. их необходимо склеивать обратно);
- доработать методы сверки и замены данных в бд;

Дедлайн: 30.03.22

Отзывы
Avatar r50 a6ce93fe35b158fd29ba0e8681c918c22117160e9586a56eee4ffbc20df9bda1
Заказчик
Евгений отлично справился с задачей. Продолжаем сотрудничать
2 года назад
R50 6d0e0258919eb74d0aa0a50003feee57
Фрилансер
 
2 года назад