ETL Extract, Transform, Load
Processen som hämtar data ur källsystem, formar om den och laddar in den i ett datalager.
Transformationssteget är där arbetet sitter: rensa dubbletter, harmonisera format, slå ihop kundregister där samma person stavas på tre sätt, räkna om valutor. Historiskt kördes det nattetid i batch eftersom källsystemen inte tålde belastningen på dagen.
Molnlagren vände på ordningen till ELT — ladda in rådata först, transformera efteråt med SQL i lagret, eftersom beräkning blivit billig. dbt byggde en hel disciplin kring den idén. Orkestreras vanligen med Airflow eller Dagster.