DevOps / Kafka Engineer в Магнит Москва

DevOps / Kafka Engineer в команду потоковых данных. Развитие и поддержка платформенного решения на базе Kafka и Kafka Connect, обеспечение отказоустойчивости и мониторинга Kafka-инфраструктуры.

Задачи:

• Обеспечивать отказоустойчивость, стабильность и доступность кластеров Kafka и Kafka Connect
• Развивать и поддерживать платформенное решение на базе Kafka и Kafka Connect
• Конфигурировать и сопровождать коннекторы MirrorMaker2, Debezium и другие Kafka Connect-коннекторы
• Диагностика и дебаг Kafka, Kafka Connect и связанных инфраструктурных компонентов
• Автоматизировать развертывание, конфигурирование и масштабирование кластеров с помощью Ansible
• Развивать внутренние инструменты для автоматизации жизненного цикла Kafka-инфраструктуры
• Настраивать мониторинг, алертинг и дашборды с использованием VictoriaMetrics, Alertmanager и Grafana
• Участвовать в миграции данных между кластерами без простоя сервисов
• Консультировать команды разработки по лучшим практикам работы с Kafka и настройке producers / consumers

Требования:

• Опыт работы DevOps / Infrastructure Engineer от 5 лет, из них не менее 2-3 лет работы с Kafka в production
• Глубокое понимание архитектуры Kafka и принципов построения отказоустойчивых высоконагруженных кластеров
• Практический опыт эксплуатации Kafka Connect, MirrorMaker2 или Debezium
• Уверенные навыки администрирования Linux и диагностики инфраструктурных проблем
• Опыт автоматизации развертывания и управления инфраструктурой с использованием Ansible
• Опыт настройки мониторинга, метрик и алертинга, работы с VictoriaMetrics, Alertmanager и Grafana
• Самостоятельность в принятии технических решений и умение консультировать команды разработки по работе с Kafka

Условия:

• Оформление в аккредитованную ИТ-компанию
• Конкурентоспособная заработная плата (обсуждается индивидуально)
• ДМС со стоматологией и льготными условиями для членов семьи
• Техника для работы
• Офис в Москве на ст. м. Савёловская, в Краснодаре, Санкт-Петербурге (ст. м. Балтийская), Иннополисе или удалённо из других городов РФ
• Возможность проведения и участия в митапах и хакатонах
• Возможность реализовать свой опыт и потенциал в интересных и многоплановых проектах
• Корпоративные скидки и программы лояльности
• Корпоративная библиотека курсов

Навыки:

• Kafka
• Kafka Connect
• MirrorMaker2
• Debezium
• Linux
• Ansible
• VictoriaMetrics
• Alertmanager
• Grafana