Data Engineer в ПАО Сбербанк Москва

Ищем дата-инженера для развития дата-платформы на Hadoop: обработка данных в batch и потоковом режимах, разработка витрин данных, ETL-пайплайнов и архитектуры данных в крупнейшем банке.

Задачи:

• разработка DWH/DataLake/LakeHouse
• построение поставки данных в Batch/NRT/RealTime
• оптимизация ETL
• повышение актуальности данных
• снижение latency доступа к данным
• разработка и валидация архитектуры данных

Требования:

• отличное знание SQL (join, CTE, оконные функции, фреймы и др.)
• опыт работы с Hadoop, Spark, Iceberg/Paimon
• опыт работы с Kafka и др. Брокерами
• опыт работы с оркестраторами (например, Airflow) и CI/CD
• опыт построения архитектуры данных (например, Data Vault, Инман, Кимбалл и др.)
• опыт кратной оптимизации ETL
• практическое знание python на уровне разработки ETL будет преимуществом
• практическое знание java/scala будет преимуществом
• практический опыт создания и защиты архитектуры данных будет преимуществом
• практический опыт разработки solution-архитектуры data-продуктов будет преимуществом

Условия:

• офисный формат работы (м Кутузовская ул. Поклонная 3)
• годовая премия
• корпоративный спортзал и зоны отдыха
• более 400 образовательных программ СберУниверситета для профессионального и карьерного развития
• регулярные митапы и развитое DS-community
• расширенный ДМС, льготное страхование для семьи и корпоративная пенсионная программа
• гибкий дисконт по ипотечному кредиту, равный 1/3 ключевой ставки ЦБ
• подписка Прайм с возможностью совместного использования на трёх близких
• вознаграждение за рекомендацию друзей в команду Сбер

Навыки:

• SQL
• Hadoop
• HDFS
• Iceberg
• Hive
• Spark
• Oozie
• Jenkins
• BitBucket
• Kafka
• Python
• Java
• Scala
• Airflow
• Data Vault
• ETL