Работа: в Обнинске , 1 вакансия

Описание проекта: Участие в проектах развития систем больших данных банка.

Стек технологий на проекте: Spark, NiFi, S3, Iceberg, K8S, Kafka, Airflow.Обязанности:

• Разработка и поддержка ETL-процессов (batch и stream) для Lakehouse-платформы на базе S3;
• Интеграция данных из разнородных источников (Kafka, CDC, реляционные СУБД, REST-сервисы);
• Участие в проектирование технических и архитектурных решений, необходимых для реализации бизнес-задач;
• Взаимодействие с архитекторами, системными аналитиками,

...