Дата инженер в ПАО Сбербанк Москва

Дата-инженер в команду анализа жизненного цикла клиента в банке. Разработка аналитических витрин данных на микросервисной архитектуре, работа с Python и Spark.

Задачи:

• Взаимодействие с PO и аналитиками для согласования требований
• Проектирование и разработка аналитических витрин данных
• Конфигурирование сборки, поставки на стенд, витрин данных и интеграций (API, ТФС)
• Определение очередности расчетов
• Разработка и поддержка спецификаций
• Проведение интеграционного, unit, регрессионного тестирования
• Мониторинг и оптимизация работы витрины: взаимодействие с сопровождением hadoop кластера и разработчиками Core-сервисов

Требования:

• Опыт работы дата-инженером от 2 лет
• Опыт работы с Hadoop и Apache Spark Scala
• Отличные знания SQL (JOINы, агрегаты, группировки, вложенные запросы, индексы, оконные функции)
• Знание основных алгоритмов и структур данных
• Опыт разработки в парадигме ООП, знание его основных принципов
• Знание форматов данных: csv, json, yaml, parquet
• Знание OLTP, OLAP, ACID, теоремы CAP
• Понимание процессов ETL, ELT
• Знание инструментов для организации и автоматизации работы: IDE, Git, Jira, Confluence

Условия:

• Комфортный современный офис рядом с м. Кутузовская, формат работы - офис
• Оформление на декретную ставку
• Корпоративный спортзал и зоны отдыха
• Более 400 образовательных программ СберУниверситета для профессионального и карьерного развития
• Расширенный ДМС, льготное страхование для семьи и корпоративная пенсионная программа
• Бесплатная подписка Прайм
• Вознаграждение за рекомендацию друзей в команду Сбера

Навыки:

• Python
• Spark
• Scala
• Hadoop
• SQL
• ETL
• ELT
• Git
• Jira
• Confluence
• CI/CD
• bash
• OLTP
• OLAP
• ACID
• CAP
• csv
• json
• yaml
• parquet