Опубликовано 12 дней назад
Lead Data Platform Engineer в CareeRoom Москва
Сопроводительное письмо под эту вакансию
Софи напишет его под твоё резюме. Бесплатно — 5 писем в день.
Lead-инженер платформы данных в компании молекулярно-генетических исследований. Проектирование и развитие единой масштабируемой data-платформы, оркестрация пайплайнов и self-service инструменты для дата-инженеров и аналитиков.
Задачи:
- Проектировать масштабируемую, надёжную и производительную архитектуру единой платформы данных
- Разрабатывать и сопровождать техническую дорожную карту платформы, синхронизированную с бизнес-целями
- Анализировать и обеспечивать scalability, reliability и performance ключевых компонентов
- Проектировать и внедрять системы оркестрации многоэтапных пайплайнов обработки данных
- Разрабатывать ключевые компоненты платформы: панель управления, оркестраторы, агенты, API, SDK
- Создавать и развивать self-service инструменты для дата-инженеров и аналитиков
- Обеспечивать мультитенантность, разграничение доступа и аудит-логирование
- Обеспечивать целостность, надёжность и безопасность данных на всех этапах
- Оптимизировать использование вычислительных и storage-ресурсов (capacity planning, performance benchmarking)
- Развивать observability: мониторинг, APM, алертинг
- Формировать и внедрять технические стандарты платформенной команды
- Систематизировать процессы разработки, унифицировать стек и инструментарий
- Вести техническую документацию по платформенным сервисам и архитектурным решениям
Требования:
- Опыт проектирования горизонтально масштабируемых, отказоустойчивых data-intensive систем на bare-metal/VM и/или в Kubernetes
- Понимание архитектурных компромиссов и умение выбирать решения под конкретные нагрузки
- Уверенное владение Python
- Опыт разработки бэкенд-сервисов и API с использованием FastAPI
- Опыт работы с оркестраторами пайплайнов: Airflow, Dagster и другие
- Понимание HTC/HPC-систем
- Опыт работы с распределёнными системами хранения: Ceph (CephFS), S3-совместимыми хранилищами
- Понимание объектного и файлового хранения для нагрузок с интенсивной обработкой данных
- Опыт построения CI/CD-пайплайнов в GitLab
- Способность принимать и аргументировать системные архитектурные решения
- Опыт формирования технических стандартов: архитектурные принципы, code review, инженерная документация, практики эксплуатации
Условия:
- Оформление по ТК РФ
- Достойный уровень з/п, обсуждается индивидуально в зависимости от навыков
- Работа в быстрорастущей, стабильной организации
- Команда профессионалов на стыке передовых ИТ и науки
- Только современное оборудование для рабочих мест
- Возможность профессионального роста, обучение
- График 5/2, офис в Москве, после испытательного срока возможен гибрид
Навыки:
- Python
- FastAPI
- Airflow
- Dagster
- Kubernetes
- Ceph
- CephFS
- S3
- GitLab
- CI/CD
- HPC
- Go
- Slurm
- Singularity
- Apptainer
Эту вакансию мы нашли в Telegram-канал @itjobsfeed
CA
CareeRoom
Москва
Зарплата vs рынок
В рынке100k400k1,0M
обычно платят (p25–p75): 273 250 – 675 000 ₽
эта вакансия: от 400 000 ₽
Когорта Data, Lead · 27 вакансий за 90 дней
Зарплаты Data →Похожие вакансии
Это единственная вакансия по вашему фильтру
Не то, что искал?