ETL
Процесс, который извлекает данные из исходных систем, преобразует их и загружает в хранилище данных.
Вся работа сосредоточена на этапе преобразования: дедупликация, унификация форматов, слияние записей клиента, чьё имя написано тремя способами, пересчёт валют. Исторически он шёл ночью пакетами, потому что днём исходные системы не выдерживали нагрузки.
Облачные хранилища поменяли порядок на обратный — ELT: сначала загружают сырые данные, затем преобразуют их SQL внутри хранилища, поскольку вычисления подешевели. Вокруг этой идеи dbt построил целую дисциплину. Оркестрируют обычно с помощью Airflow или Dagster.