Разработать ETL процессы на NiFi

50 000 руб. за проект
31 января 2023, 11:17 • 7 откликов • 35 просмотров
Надо сделать прототип (PoC) системы, которая будет забирать данные о клиентах из Postgresql , делать валидацию с помощью процессов, настроенных на NiFi (их вам и предстоит настроить) и складывать данные в ту же структуру, но уже провалидированные.

Процессы для вализации

-Валидация адреса
-Валидация телефонного номера
-Валидация паспортных данных
-Валидация имени клиента
-Проверка точки данных
-Проверка нулевых значений


Адреса надо валидировать по справочнику КЛАДР.
Паспортные данных надо валидировать на правильный формат.
Проверка точки данных одначает что надо проверить данные на полноту, что запись пригодна для дальнейшего использования. По сути это наличие ключевых полей