DataOps инженер в ПАО Сбербанк Москва

Инженер DataOps в облачную инфраструктуру данных Сбера. Сопровождение и развитие платформы для работы с данными и ML: S3, Spark-on-Kubernetes, Trino, Airflow, MLFlow.

Задачи:

• Сопровождать проектную инфраструктуру работы с данными и машинного обучения (Managed S3 5PB, Spark-on-Kubernetes, Trino, Nessie, Datahub, Airflow, Jupyterhub, MLFlow)
• Участвовать в развитии архитектуры и инфраструктуры проекта
• Участвовать в проектах по пилотированию технологий обработки данных

Требования:

• Высшее образование
• Опыт работы в аналогичной роли от 2 лет
• Знание принципов построения и работы облачных сервисов, сервисов данных
• Практический опыт сопровождения кластеров больших данных на базе S3, Hadoop или облачных платформ
• Понимание подходов к организации разработки (CI/CD, DevOps) с опытом работы с инструментами Gitlab, ArgoCD, Jenkins (или аналогами)
• Хорошие знания SQL и опыт работы с реляционными БД
• Практический опыт автоматизации процессов и написания скриптов на Python и Bash

Условия:

• Офис рядом с метро Маяковская
• Гибридный формат работы
• Ежегодный пересмотр зарплаты и годовая премия
• Корпоративный спортзал и зоны отдыха
• Подписка Прайм с возможностью совместного использования на трёх близких
• Более 400 образовательных программ СберУниверситета
• Гибкий дисконт по ипотечному кредиту, равный 1/3 ключевой ставки ЦБ
• Расширенный ДМС, льготное страхование для семьи и корпоративная пенсионная программа
• Вознаграждение за рекомендацию друзей в команду Сбера

Навыки:

• S3
• Spark
• Kubernetes
• Trino
• Nessie
• Datahub
• Airflow
• Jupyterhub
• MLFlow
• Hadoop
• CI/CD
• DevOps
• Gitlab
• ArgoCD
• Jenkins
• SQL
• Python
• Bash
• Scala
• Java
• Kafka
• Hive
• Datafusion
• Clickhouse
• Vertica
• Greenplum
• DWH