Data Engineer в ПАО Сбербанк Москва

Data Engineer в Сбер для разработки ETL/ELT-процессов и аналитической поддержки. Нужен инженерный подход к данным, продвинутый SQL и промышленный опыт на Apache Spark/Scala.

Задачи:

• Проектирование на основе спецификаций (Spec-driven)
• Разработка ETL/ELT процессов
• Оркестрация и мониторинг
• Аналитическая поддержка
• Работа с документацией
• Взаимодействие со стейкхолдерами

Требования:

• Опыт работы от 4 лет в ролях Data Engineer, DWH-разработчика или системного аналитика данных
• Продвинутый уровень SQL: оконные функции (ROW_NUMBER, LAG/LEAD), CTE, понимание плана выполнения запроса (EXPLAIN) и оптимизации
• Уверенное владение Apache Spark: опыт промышленной разработки на языке Scala, опыт работы с экосистемой Big Data: HDFS, Hive Metastore, YARN, Parquet/ORC форматы
• Практический опыт работы с оркестраторами (Airflow, Luigi или аналоги)
• Владение Git: ветвление (GitFlow), код-ревью, разрешение конфликтов

Условия:

• Офисный формат работы
• Ежегодный пересмотр зарплаты, годовая премия
• Более 400 образовательных программ СберУниверситета для профессионального и карьерного развития
• Расширенный ДМС, льготное страхование для семьи и корпоративная пенсионная программа
• Гибкий дисконт по ипотечному кредиту, равный 1/3 ключевой ставки ЦБ
• Подписка Прайм с возможностью совместного использования на троих членов семьи
• Вознаграждение за рекомендацию друзей в команду Сбера

Навыки:

• SQL
• Apache Spark
• Scala
• HDFS
• Hive Metastore
• YARN
• Parquet
• ORC
• Airflow
• Luigi
• Git
• Python
• Pandas
• PySpark