Опубликовано вчера

Аналитик данных Data Quality в ПАО Сбербанк Москва

Building iconв офис
Person iconmiddle
Money bag iconне указана

Сопроводительное письмо под эту вакансию

Софи напишет его под твоё резюме. Бесплатно — 5 писем в день.

Аналитик данных в команду DataQuality антифрод-платформы. Задача — настраивать и развивать систему мониторинга качества данных на потоке событий: снижать ложные срабатывания алертов и исследовать обращения пользователей, находя пробелы в покрытии мониторинга.

Задачи:

  • Разбирать поток срабатываний проверок качества данных, отличая реальную деградацию от шума и ложных сигналов
  • Настраивать проверки для снижения доли ложных срабатываний: подбирать пороги по уровням severity, окно агрегации и базовый период на основе распределения метрики
  • Копать до первопричины срабатываний: идти в сырые события, поднимать историю, сопоставлять с релизами и инцидентами
  • Оценивать качество алертов: сколько сигналов были ложными и почему
  • Развивать методы детектирования: проверять статистические и ML-подходы к поиску аномалий и дрейфа на временных рядах и распределениях скорингов
  • Работать с полной историей событий в Hadoop: писать запросы и расчеты на Spark SQL и PySpark в рамках ресурсов общего кластера
  • Исследовать обращения пользователей антифрод-платформы в поддержку и вытаскивать из них реальную проблему с данными
  • Соотносить обращения с текущим покрытием мониторинга
  • Доводить находку до подтвержденной на данных проблемы и передавать ее системному аналитику

Требования:

  • Опыт в аналитике данных или Data Science от трех лет, включая работу с потоковыми или near-real-time данными и большими объемами в Hadoop / Spark
  • Spark SQL и PySpark на больших объемах как ежедневный инструмент, умение читать план запроса и оценивать его стоимость
  • Уверенный SQL: оконные функции, многошаговые агрегации, джойны с контролем кардинальности, работа с NULL и типами, понимание деградации запросов и отличий колоночной СУБД от строчной
  • Python как основной рабочий инструмент
  • Теория вероятностей и математическая статистика на уровне уверенного применения: доверительные интервалы, проверка гипотез, ошибки первого и второго рода
  • Прикладная статистика для мониторинга: дрейф распределений (PSI), отклонение среднего и дисперсии, выбросы (z-score / IQR), сезонность, precision / recall применительно к алертам
  • Практический опыт с ML: метрики качества, переобучение, дрейф признаков, влияние качества данных на модель
  • Понимание принципов мониторинга качества данных: типы проверок, уровни severity
  • Системный взгляд и исследовательская жилка

Условия:

  • Комфортный современный офис в Москве, Кутузовский, 32
  • График работы — офис
  • Ежегодный пересмотр зарплаты, квартальная и годовая премия
  • Корпоративный спортзал и зоны отдыха
  • Более 400 образовательных программ СберУниверситета
  • Расширенный ДМС, льготное страхование для семьи и корпоративная пенсионная программа
  • Гибкий дисконт по ипотечному кредиту
  • Подписка Прайм с возможностью совместного использования на трёх близких
  • Вознаграждение за рекомендацию друзей в команду Сбер

Навыки:

  • Spark SQL
  • PySpark
  • Hadoop
  • SQL
  • Python
  • ClickHouse
  • PSI
  • z-score
  • IQR
  • Great Expectations
  • Soda
  • Evidently
  • Monte Carlo
  • Atlas
  • DataHub
  • OpenLineage
Эту вакансию мы нашли в sber
ПАО Сбербанк

ПАО Сбербанк

Москва

Получить оффер

Зарплата vs рынок

Зарплата не указана. Обычно на такой позиции платят 144 000 – 250 000 ₽, медиана 200 000 ₽.

60k200k375k

обычно платят (p25–p75): 144 000 – 250 000 ₽

Когорта Analytics, Middle · 366 вакансий за 90 дней

Зарплаты Analytics →

Похожие вакансии

Это единственная вакансия по вашему фильтру

Не то, что искал?

Автоотклики