Middle Data Engineer/ Инженер-программист в Агентство цифровой трансформации Минск

Ключевые задачи:
Разработка и поддержка ETL/ELT-пайплайнов
Создание и развитие потоков данных из различных источников через Kafka с обработкой в Spark
Построение слоя трансформации и очистки сырых данных
Создание и внедрение процессов Data Quality и Data Governance
Работа с оркестратором Airflow (настройка, мониторинг, оптимизация пайплайнов)

Мы ожидаем:

Уверенное владение Python
Практический опыт работы с Kafka, Spark и Airflow
Опыт написания и отладки сложных SQL-запросов
Опыт работы с Greenplum и/или ClickHouse (будет преимуществом)
Опыт работы с MongoDB
Понимание контейнеризации (Docker) и оркестрации (Kubernetes)
Знакомство с DevOps-практиками
Высшее образование

Мы предлагаем:

Финансовая мотивация и гарантии:
Конкурентная заработная плата
Официальное трудоустройство (ТК РБ), полный соцпакет
28 дней отпуска + матпомощь на оздоровление
Медицинская страховка

Профессиональное развитие:
Оплата курсов, конференций и семинаров

Корпоративная культура:
Современный офис в центре Минска
Качественное оборудование
График работы (пн.–чт. 9:00–18:00, пт. 9:00–16:45)
Корпоративы, подарки сотрудникам на значимые даты
Уютные зоны отдыха с игровыми пространствами
Корпоративная программа занятий спортом (All Sports)