Gradient descent
Optimeringsalgoritmen som tränar nästan alla ML-modeller — ta små steg i den riktning som minskar felet mest.
Liknelse: du är på ett berg i dimma, vill ner. Känn lutningen, gå nedåt, repetera. Varianter: SGD, Adam, AdamW — alla bygger på samma idé med olika smarta tricks.