Нужно написать код, который будет читать сообщения в топике Kafka Spark-ом

20 000 руб. за проект
08 января 2024, 12:24 • 13 откликов • 73 просмотра

Задача:
Spark можно развернуть локально.
Нужно написать код, который будет читать сообщения в топике Kafka Spark-ом и отправлять в S3 пакет в Yandex Cloud. Также необходимо реализовать обработку и логирование ошибок.

стек:
- Python
- Kafka
- Spark
- AWS S3 (У нас Yandex Cloud)


Оставляйте телеграмм для быстрой связи с вами. Просьба откликаться только кандидатов с опытом!