Data engineer (Рекламная платформа) в Сбер. IT Москва

ИТ B2C — самая крупная экосистема в Сбере. Нас более 8000 человек в 18 городах России. Мы занимаемся разработкой и развитием розничных решений, помогая сделать сервисы Банка доступнее, безопаснее и удобнее. Ждем именно тебя!

Мы ищем Data engineer в команду развития специализированных витрин данных.

Обязанности

Чем предстоит заниматься:

• разрабатывать и поддерживать витрины данных в облачной экосистеме
• проектировать и улучшать архитектуру системы
• разрабатывать и оптимизировать пайплайны обработки данных/ETL на Python / Scala, а также помогать другим командам
• внедрять контроль качества данных (SODA).

Требования

Ждем от кандидата:

• высшее образование
• опыт работы в аналогичной роли от 3 лет
• глубокое понимание принципов модели распределённых вычислений, а также уверенные навыки поиска, обработки данных и построения витрин с помощью Spark и SQL.
• опыт промышленной разработки на стеке Scala/Java/Python, знание инструментов по обработке больших данных (Spark, Trino, Polars) и опыт работы со стримингом (Flink, Spark Streaming, Kafka).
• продвинутые знания SQL и практический опыт работы с одной из реляционных СУБД (Oracle, PostgreSQL, mySQL, MS SQL Server), а также работа с объектными хранилищами S3 и файловой системой HDFS.
• знание любого оркестратора рабочих процессов (AirFlow, Oozie, Dagster, Argo Workflows) и понимание подходов к организации разработки (CI/CD, DevOps).

Будет плюсом:

• опыт работы с Iceberg,DataHub/OpenMetaData,SODA/GreateExpectation, ClickHouse,Kubernetes
• навыки работы с генеративными AI-моделями
• опыт создания AI-агентов и использования их в работе опыт использования GigaChat, Kandinsky и аналогов в продуктах, навыки создания и использования AI-агентов.

Условия

Что мы предлагаем:

• офис рядом с метро Маяковская
• гибридный формат работы
• ежегодный пересмотр зарплаты и годовая премия
• корпоративный спортзал и зоны отдыха
• подписка Прайм с возможностью совместного использования на трёх близких
• более 400 образовательных программ СберУниверситета для профессионального и карьерного развития
• гибкий дисконт по ипотечному кредиту, равный 1/3 ключевой ставки ЦБ
• расширенный ДМС, льготное страхование для семьи и корпоративная пенсионная программа
• вознаграждение за рекомендацию друзей в команду Сбера.