Дата инженер/Инженер по данным в Bell Integrator Москва

Инженер по данным в команду маркетинга крупного банка РФ. Разработка продуктовых витрин и Martech-инструментов для сквозной аналитики пользовательского пути.

Задачи:

• Загрузка, очистка и трансформация больших объёмов данных из различных источников (RDBMS, Hadoop, плоские файлы) в рабочую область на платформах Hadoop
• Проектирование и разработка аналитических витрин данных
• Проектирование и разработка коннекторов для ETL процессов
• Мониторинг и оптимизация процессов загрузки, преобразования данных и сборки витрин
• Разработка, поддержка и оптимизация инфраструктуры и внутренних сервисов для обработки больших объёмов данных
• Разработка инструментов для автоматизации рутинных задач, связанных с обработкой данных

Требования:

• Опыт работы от 2 лет
• SQL на продвинутом уровне (аналитические функции, подзапросы, хранимые процедуры, оптимизация производительности)
• Стек технологий Big Data (Hadoop, Spark, Hive/Impala) и любая СУБД
• Знание понятий и концепций DWH
• Python (PySpark, Pandas, NumPy, REST API)
• Airflow/Dagster/Oozie, Bitbucket/Git, Bash

Условия:

• Формат работы: офис (Москва, Оружейный пер., 41)

Навыки:

• SQL
• Hadoop
• Spark
• Hive
• Impala
• DWH
• Python
• PySpark
• Pandas
• NumPy
• REST API
• Airflow
• Dagster
• Oozie
• Bitbucket
• Git
• Bash
• Яндекс.Метрика
• AppMetrica