Data Engineer / Инженер по данным в Республиканский центр электронного здравоохранения Астана

Инженер по данным в Республиканский центр электронного здравоохранения МЗ РК. Проектирование и развитие ETL/ELT-процессов, пайплайнов обработки больших данных и интеграций между государственными информационными системами.

Задачи:

• Проектирование и развитие процессов сбора, загрузки, преобразования и передачи данных (ETL/ELT)
• Разработка и сопровождение пайплайнов обработки больших объемов данных
• Работа с реляционными и нереляционными базами данных
• Анализ структуры и качества данных, выявление дублирования, пропусков и несоответствий
• Разработка SQL-запросов, процедур, скриптов и механизмов обработки данных
• Построение интеграционного взаимодействия между информационными системами и источниками данных
• Участие в разработке и развитии DWH / Data Lake / аналитических хранилищ
• Настройка процессов регулярной загрузки и синхронизации данных
• Обеспечение контроля качества, полноты и целостности данных
• Оптимизация запросов и процессов обработки больших объемов данных
• Анализ источников данных и определение необходимых таблиц, полей, связей и бизнес-смыслов
• Участие в проектировании моделей данных и структуры хранилищ
• Взаимодействие с системными и бизнес-аналитиками, разработчиками, архитекторами и DevOps
• Подготовка технической документации по потокам данных, интеграциям и структуре БД
• Участие в тестировании и приемке интеграционных решений
• Поиск и устранение проблем в процессах загрузки и обработки данных
• Участие в реализации интеграционных решений между крупными государственными информационными системами

Требования:

• Опыт работы от 3 лет в роли Data Engineer / инженера по данным
• Опыт работы с большими объемами данных и высоконагруженными системами
• Уверенное знание SQL и опыт работы с СУБД
• Понимание принципов построения DWH, Data Lake и ETL/ELT
• Опыт разработки и сопровождения пайплайнов обработки данных
• Навыки анализа структуры, качества и взаимосвязей данных
• Опыт работы с реляционными и нереляционными базами данных
• Понимание принципов интеграции информационных систем
• Готовность работать с крупными государственными и медицинскими информационными системами

Условия:

• Работа над масштабным государственным проектом в сфере цифрового здравоохранения Казахстана
• Работа с большими объемами данных и сложными интеграциями
• Участие в развитии архитектуры данных и хранилища
• Профессиональный рост и развитие компетенций Data Engineering
• Взаимодействие с командой аналитиков, разработчиков, архитекторов и DevOps
• Оформление по ГПХ / ДВОУ
• График 5/2, 09:00–18:00
• Обед 13:00–14:00
• Формат работы: только офис
• Адрес: г. Астана, пр. Кабанбай батыра, 17

Навыки:

• SQL
• ETL
• ELT
• DWH
• Data Lake
• СУБД
• реляционные базы данных
• нереляционные базы данных