Middle Data Engineer в команду SMT в 2ГИС.RnD удалённо

Почему это интересно:

• Ты действительно будешь создавать платформу с нуля — не “настроил Airflow и готово”, а архитектура верхнего уровня с безопасностью, мониторингом и многопользовательской нагрузкой;

• Прямое влияние на технологический курс всей компании: твои решения будут использовать десятки команд;

• Работа с современным стеком: Spark 3+, Kafka, S3, ClickHouse, и BI-инструментами;

• Возможность реализовать техрешения, которые трудно было бы внедрить в рамках существующего кода/подходов;

• Технический вызов: миграция с Hadoop, масштабируемость, отказоустойчивость, строгие SLA на доставку данных.

Мы будем рады специалисту, который:

• Имеет 3+ лет опыта на позиции Data Engineer / Big Data Engineer;

• Хорошо понимает, как работает Spark и умеет его готовить;

• Работал с ClickHouse и знает, как «выжать» из него максимум;

• Знаком с построением дата-архитектуры (DWH, Lake, OLAP, ETL/ELT, Data Goverments);

• Умеет проектировать пайплайны под отказоустойчивость;

• Хорошо владеет одним из языков программирования;

• Знает SQL и может читать логику отчетов без боли.

Плюсом будут:

• Опыт построения дата-платформ (SelfService инструменты и процессы);

• Имеет опыт работы с высоконагруженной Kafka (десятки/сотни тысяч событий);

• Знание инструментов мониторинга и автоматического контроля качества данных (Data Quality, Data contracts);

• Опыт построения Data Lineage и работа с Data Catalog;

• Инфраструктурный опыт: Docker, Kubernetes, CI/CD.

Как мы работаем:

• Не боимся убирать легаси — мы осознанно избавляемся от устаревших решений;

• Оцениваем эффективность не по объёму кода, а по бизнес-ценности;

• Любим, когда инженер предлагает нестандартные, но обоснованные решения;

• Верим, что архитектура важна, если её понимают (human-friendly документация — мастхэв);

• Умеем договариваться — и с бизнесом, и между собой.

Что мы предлагаем:

• 2ГИС — аккредитованная IT-компания;

• У нас можно работать удалённо. Для нас важен специалист, а не его локация. Если хочешь работать в гибридном формате, у нас есть офисы в Москве, Санкт-Петербурге, два классных офиса в Новосибирске;

• Само собой, полностью белая зарплата. Дополнительные дни отпуска за стаж работы в компании;

• Заботимся о здоровье: ДМС и возможность получать онлайн-консультации и терапевта, невролога, психолога и медицинского агента;

• Если хочешь делиться своим опытом, мы только за — поможем с выступлениями на конференциях и статьями для Хабра;

• Есть собственный учебный центр: курсы, тренинги и книги для прокачки скиллов.