Data Engineer в ПАО Сбербанк Москва

Специалист, сочетающий инженерный подход к разработке ETL-процессов с глубоким пониманием аналитики данных. Проектирование по спецификациям, разработка ETL/ELT, оркестрация и аналитическая поддержка.

Задачи:

• Проектирование на основе спецификаций (Spec-driven)
• Разработка ETL/ELT процессов
• Оркестрация и мониторинг
• Аналитическая поддержка
• Работа с документацией
• Взаимодействие со стейкхолдерами

Требования:

• Опыт работы от 4 лет в ролях Data Engineer, DWH-разработчика или системного аналитика данных
• Продвинутый уровень SQL: оконные функции (ROW_NUMBER, LAG/LEAD), CTE, понимание плана выполнения запроса (EXPLAIN) и оптимизации
• Уверенное владение Apache Spark: опыт промышленной разработки на Scala, работа с экосистемой Big Data: HDFS, Hive Metastore, YARN, Parquet/ORC
• Практический опыт работы с оркестраторами (Airflow, Luigi или аналоги)
• Владение Git: ветвление (GitFlow), код-ревью, разрешение конфликтов

Условия:

• Офисный формат работы
• Ежегодный пересмотр зарплаты, годовая премия
• Более 400 образовательных программ СберУниверситета
• Расширенный ДМС, льготное страхование для семьи и корпоративная пенсионная программа
• Гибкий дисконт по ипотечному кредиту, равный 1/3 ключевой ставки ЦБ
• Подписка Прайм с возможностью совместного использования на троих членов семьи
• Вознаграждение за рекомендацию друзей в команду Сбера

Навыки:

• SQL
• Apache Spark
• Scala
• HDFS
• Hive Metastore
• YARN
• Parquet
• ORC
• Airflow
• Luigi
• Git
• GitFlow
• Python
• Pandas
• PySpark