Опубликовано 16 дней назад

Data инженер / разработчик DWH в Альфа Банк удалённо

удаленно

не указана

Сопроводительное письмо под эту вакансию

Софи напишет его под твоё резюме. Бесплатно — 5 писем в день.

Data-инженер в команду DWH Альфа-Банка. Проектирование и разработка пайплайнов загрузки данных, CDC через Debezium и Kafka, ETL на Informatica PowerCenter, оркестрация в Airflow.

Задачи:

Проектировать и разрабатывать пайплайны загрузки данных из источников в единый интеграционный слой
Настраивать CDC через Debezium + Kafka, обрабатывать insert/update/delete, late data, дубли, эволюцию схем
Разрабатывать ETL-процессы на Informatica PowerCenter, оркестрация потоков через Airflow
Поддерживать загрузку данных в режиме 1:1 с источником, контролировать полноту и целостность
Разрабатывать трансформации в преддетальном слое: приведение типов, форматов, структур, ключей и справочников к виду DWH на Oracle
Работать с Impala/Hadoop + Spark при интеграции данных с источниками
Обеспечивать работу как батчевых, так и near-real-time (NRT) пайплайнов
Вести документацию, data lineage, метаданные, участвовать в code review
Работать в кросс-функциональной команде с аналитиками, QA, DBA, архитектором и бизнес-заказчиком

Требования:

Опыт в Data Engineering от 2-3 лет
Уверенный SQL
Опыт оркестрации пайплайнов в Airflow
Опыт работы с Kafka и Debezium, понимание CDC
Опыт обработки JSON/XML и приведения полуструктурированных данных к табличному виду
Понимание принципов DWH, слоёв хранилища, историчности, SCD, Data Quality
Опыт работы с батчевыми и NRT-пайплайнами
Python или другой язык для автоматизации и обработки данных
Git, понимание процессов релиза

Условия:

Стабильный и прозрачный доход: размер заработной платы обсуждается по итогам собеседования + квартальная премия по результатам KPI
Полная удалёнка или гибрид на выбор, а также уютный ИТ-хаб в Москве, Санкт-Петербурге, Екатеринбурге и сезонный коворкинг в Сочи
Сложные и интересные задачи, современный стек технологий
Забота о здоровье: программа ДМС с первых дней работы, включая стоматологию, обслуживание в лучших клиниках города, страхование и компенсация 10-ти дней больничного
Возможность вертикального и горизонтального карьерного роста: регулярно проходят тренинги, вебинары, митапы и демо-дни
Оплата посещения профильных конференций и курсов, помощь с подготовкой к публичным выступлениям и написанием статей на Хабр
Доступ к бесплатным корпоративным библиотекам Alpina Digital, MyBook и бизнес-изданий
Предложения от Банка только для сотрудников: собственные спортзалы (Москва, Санкт-Петербург, Екатеринбург), а также скидки на услуги туристических агентств, продукты питания, в рестораны, бары, магазины

Навыки: