Confusiematrix
De tabel waarin de voorspellingen van een model naast de werkelijkheid worden gelegd: bij een binair probleem vier cellen (true positive, false positive, false negative en true negative) waaruit alle andere maten volgen.
Precisie is het aandeel van wat het model markeerde dat daadwerkelijk klopte; recall is het aandeel van wat er te vinden was dat het model ook vond. De twee trekken in tegengestelde richting, en wat zwaarder weegt hangt volledig af van de toepassing: een screening op kanker mag nauwelijks gevallen missen, een spamfilter mag geen echte post weggooien. Nauwkeurigheid (accuracy) is vrijwel altijd een misleidende maat. Als één procent van de transacties fraude is, scoort een model dat altijd “nee” zegt 99 procent en is het waardeloos. De matrix laat dat meteen zien: de hele positieve kolom is leeg. Bij meerdere klassen wordt het een vierkante tabel waarin de interessante fouten buiten de diagonaal staan.