Data engineer в AGIMA удалённо

Data engineer в компанию AGIMA. Работа с MPP-базами данных, ETL-процессами и Python для обработки данных.

Требования:

• Уверенное знание MPP-баз данных — Greenplum (или аналогов: Redshift, Vertica).
• Умение писать сложные SQL-запросы, понимание партиционирования, distribution keys, работы с большими объёмами данных. Знание PostgreSQL: индексы, транзакции, оконные функции, работа pg-драйверами.
• Уверенное владение Python для задач обработки данных: pandas, psycopg2 / SQLAlchemy для работы с БД, boto3 для Object Storage, requests для работы с REST API. Умение писать читаемый, поддерживаемый код.
• Опыт работы с Apache AirFlow: написание DAG-ов на Python, управление зависимостями, настройка расписаний, мониторинг и отладка.
• Понимание принципов ETL. Опыт работы с Informatica (или аналогами: Talend, dbt, SSIS) будет плюсом. Умение реализовывать загрузку CSV и структурированных данных в БД.
• Опыт работы с S3-совместимыми хранилищами (Yandex Object Storage, AWS S3 и пр.) — загрузка, хранение промежуточных и выходных данных.

Условия:

• гибкий график: 5/2 с 10:00 до 19:00, но при необходимости часы работы подстроим под вас
• теплая атмосфера: клубы по интересам, летний выезд на природу AGIMA Camp и корпоративные вечеринки, куда можно приглашать и свою семью
• сильная команда: открытость к решению любых вопросов и поддержка в создании вашего личного бренда для профессионального роста
• особые бонусы: бесплатные билеты на культовый забег для IT-специалистов RUNIT
• профессиональное развитие: участие в профильных конференциях — оплатим дорогу и участие, если выступаете как спикер
• обучение: доступ к разработанным нами курсам по UX-дизайну, проджект-менеджменту, тимлидингу и другим направлениям

Навыки:

• Greenplum
• Redshift
• Vertica
• SQL
• PostgreSQL
• Python
• pandas
• psycopg2
• SQLAlchemy
• boto3
• requests
• Apache AirFlow
• ETL
• Informatica
• Talend
• dbt
• SSIS
• S3
• Yandex Object Storage
• AWS S3