Дата-инженер (Прайсинг продуктов) в Альфа банк удалённо

Разработка и поддержка batch-пайплайнов данных, DAG'ов в Airflow, работа со Spark и Hadoop в крупнейшем частном банке России.

Задачи:

• Разрабатывать, поддерживать и дорабатывать batch-пайплайны данных
• Поддерживать и развивать DAG’и в Airflow
• Работать со Spark и Hadoop: настраивать, запускать и оптимизировать расчеты
• Разбираться в проблемах производительности и стабильности

Навыки:

• Airflow
• Spark
• Hadoop