Data Engineer в Технократия Казань

Data Engineer в финтех-продукты компании Технократия. Задача — интеграция источников данных, построение витрин для BI и обеспечение качества и актуальности данных.

Задачи:

• Проектировать и поддерживать интеграцию источников данных (взаимодействие с процессинговыми системами и АБС)
• Организовывать мониторинг актуальности входящих данных и оперативно реагировать на инциденты
• Готовить данные для загрузки в оговоренные форматы хранения (Data Lake / DWH) для смежных команд
• Разрабатывать и оптимизировать витрины данных для BI-отчетности в Superset и PowerBI
• Проводить глубокую проверку качества данных (Data Quality), выявлять аномалии и устранять корневые причины ошибок
• Обеспечивать бесперебойную актуальность данных, соблюдение SLA и быстрое восстановление при авариях

Требования:

• Опыт в направлении финтех
• Отличное знание SQL (DDL/DML) в PostgreSQL
• Хорошее знание SQL (DDL/DML) в ClickHouse
• Отличные навыки оптимизации SQL-запросов в PostgreSQL
• Отличные навыки работы с Python: написание и поддержка DAG-ов в Airflow, опыт работы с асинхронными сервисами
• Хорошие навыки конфигурирования PostgreSQL

Условия:

• Казань (релокация/гибридный формат)
• Работа на международных проектах

Навыки:

• SQL
• PostgreSQL
• ClickHouse
• Python
• Airflow
• Data Lake
• DWH
• Superset
• PowerBI
• Data Quality