Middle Data инженер в TG @recrytingIT удалённо

Middle Data инженер для работы с BigData, ETL и Hadoop. Требуется опыт интеграционных решений и знание SQL.

Задачи:

• Разработка, реализация и поддержка интеграционных решений на стеке технологий (Java, Groovy, Apache Nifi, Airflow)
• Определение стека технологий для конкретных проектов и задач
• Решение технически сложных задач
• Оперативное реагирование на проблемы в зоне ответственности
• Разработка и контроль актуальности документации
• Предоставление отчетов о деятельности
• Контроль качества интеграционных решений
• Определение технологической стратегии развития проекта
• Выстраивание процессов (CI/CD, код-ревью), внедрение инженерных практик

Требования:

• Владение одним из языков программирования (Java, Groovy), знание ООП
• Сборка проекта, компиляция и деплой в Rancher (Docker)
• Опыт проектирования, реализации, развития и поддержки интеграционных решений на стеке BigData
• Знание SQL (индексы, функции, чтение планов запросов, оптимизация)
• Опыт работы с реляционной БД (Oracle, Postgres, MySQL, MsSQL, DB2 и т.п.)
• Умение работать с Git в консоли
• Знание особенностей работы ETL-инструментов (Apache Nifi, Airflow, SAP BW, Talend, Informatica, SAS и т.п.)
• Опыт работы с Hadoop
• Понимание HDFS, форматов данных
• Опыт работы с Hive или другим хранилищем на основе Hadoop
• Опыт использования систем ведения проектов и документации
• Умение работать с архитектурными схемами
• Понимание принципов построения и хранения данных - DWH и DataLake

Условия:

• Гражданство Россия
• Локация Россия
• Формат работы Удалённо
• Загрузка Full-time
• Срок привлечения 6+ мес
• Вилка: 180-200

Навыки:

• Java
• Groovy
• Rancher
• Docker
• BigData
• SQL
• Oracle
• Postgres
• MySQL
• MsSQL
• DB2
• Git
• Apache Nifi
• Airflow
• SAP BW
• Talend
• Informatica
• SAS
• Hadoop
• HDFS
• Hive
• Unix
• Linux
• Yarn
• Ranger
• Spark
• Zookeeper
• Zabbix
• Ansible
• CI/CD