Что такое ETL

ETL (Extract, Transform, Load) — процесс извлечения данных из источников, их преобразования и загрузки в целевую систему. **Extract** — получение данных из БД, API, файлов и т.д. **Transform** — очистка, валидация, агрегация, обогащение данных. **Load** — загрузка в хранилище (DWH, Data Lake и т.п.). Пример на Java с Apache Spark: ```java Dataset rawData = spark.read().json("input.json"); Dataset transformed = rawData.filter("age > 18") .groupBy("city").count(); transformed.write().mode("overwrite").parquet("output.parquet"); ``` Используется в аналитике, миграциях, интеграциях. Популярные инструменты: Apache NiFi, Talend, Informatica.