Опубликовано вчера

Data Quality Engineer в ЛОКО БАНК удалённо

удаленно

junior

не указана

Софи напишет его под твоё резюме. Бесплатно — 5 писем в день.

Обязанности:

Мониторинг качества Feature Store - настройка проверок на платформе Evidently, сверка логики сбора фичей с продовым скорингом, выявление деградации и расхождений;
Поддержка и развитие существующих проверок качества данных;
Внедрение автоматических проверок на этапах загрузки (Soda Core);
Настройка дашбордов в Grafana;
Синхронизация наполнения OpenMetaData;
Аудит пользовательских витрин: анализ использования, выявление неиспользуемых и ресурсоёмких объектов;
Взаимодействие с аналитиками BI для корректного построения источников данных.

Требования:

Стек технологий :
Python, SQL, Apache Airflow, Soda Core, Grafana, OpenMetaData, Git, Trino, Apache Iceberg, Evidently
Опыт коммерческой разработки на Python от 1 года (именно для data-инженерии);
Продвинутый SQL (оконные функции, CTE, объединения, подзапросы);
Опыт написания DAG в Apache Airflow;
Практический опыт внедрения проверок качества данных (Soda Core или аналоги);
Понимание принципов Data Quality: уникальность, полнота, свежесть, согласованность, распределение;
Знание принципов настройки мониторинга данных (Grafana);
Знание каталогов метаданных (OpenMetaData или аналоги);
Готовность взаимодействовать с BI-разработчиками (Qlik, Power BI).