Funzione di perdita
La funzione che misura quanto è sbagliato l'output del modello: ciò che la discesa del gradiente cerca di minimizzare.
I classici: errore quadratico medio (regressione) ed entropia incrociata (classificazione). La scelta della perdita determina per cosa il modello si ottimizza. Perdita sbagliata, modello che impara le cose sbagliate.