Data Engineer / ML Engineer в Магнит Москва

Инженер данных и ML-инженер в команду разработки: проектирование ETL-процессов, создание backend-сервисов на Python, оптимизация ML-проектов и работа с хранилищами данных.

Задачи:

• Проектировать и разрабатывать ETL-процессы (batch).
• Создавать backend-сервисы на Python для обработки данных и интеграции с внешними системами.
• Инженерно оптимизировать ML-проекты: рефакторить и оборачивать в продакшен пайплайны обучения и инференса, обеспечивая стабильность, воспроизводимость и наблюдаемость.
• Участвовать в проектировании хранилищ данных и оптимизации существующих решений.

Требования:

• Опыт коммерческой разработки на Python не менее 2 лет; владение стандартной библиотекой и экосистемой data-разработки.
• Понимание принципов построения ETL/ELT-процессов.
• Опыт работы с распределёнными СУБД (Greenplum, ClickHouse) и вычислительными движками (Apache Spark, Trino).
• Оркестрация пайплайнов в Airflow.
• Верхнеуровневое понимание жизненного цикла ML-моделей.
• Основы CI/CD и DevOps: сборка, тестирование, деплой.
• Навыки работы в командной строке Linux.
• Контейнеризация (Docker).
• Использование ИИ-ассистентов в разработке (opencode или аналоги) для ускорения написания и ревью кода.

Условия:

• Оформление в аккредитованную ИТ-компанию.
• Конкурентоспособная заработная плата (обсуждается индивидуально).
• ДМС со стоматологией и льготными условиями для членов семьи.
• Техника для работы.
• График работы 5/2.
• Работа в офисе в центре Москвы (ст. м. Савеловская), в Краснодаре или удаленно из других городов РФ, также есть офисы в Санкт-Петербурге (ст. м. Балтийская) и в Иннополисе.
• Возможность реализовать свой опыт и потенциал в интересных и многоплановых проектах.
• Развитие – оплачиваем обучение на курсах и участие в конференциях.
• Возможность проведения и участия в митапах, хакатонах.
• Наличие корпоративных скидок PRIMEZONE и программ лояльности от компании.
• Наличие корпоративной библиотеки курсов.
• Возможность рекомендовать компанию своим друзьям, участвуя в реферальной программе.

Навыки:

• Python
• PySpark
• Pandas
• FastAPI
• Pydantic
• PostgreSQL
• ClickHouse
• Greenplum
• Trino
• S3
• Apache Airflow
• MLflow
• Docker
• Kubernetes
• Git
• GitLab CI/CD
• Linux
• ETL
• ELT
• Apache Spark