Det kan virke meget kompliceret at måle retfærdighed, da det ikke bare er et spørgsmål om tal, men også om etik. Men teknisk set kan man bruge forskellige matematiske metoder til at tjekke, om en algoritme behandler forskellige grupper af mennesker ens.
En af de mest almindelige metoder er at kigge på statistisk lighed. Her undersøger man, om algoritmen giver de samme resultater for forskellige grupper, for eksempel på tværs af køn eller etnicitet. Man kan eksempelvis måle, om sandsynligheden for at få et lån er den samme for mænd som for kvinder med samme økonomiske profil.
En anden metode er at kigge på fejlrater. Man undersøger, om algoritmen tager fejl oftere for bestemte grupper end andre. Hvis en algoritme systematisk giver afslag til en bestemt gruppe, selvom de faktisk er kreditværdige, er der tale om en uretfærdig bias.
Man bruger ofte softwareværktøjer til at lave disse tests. Ved at køre simuleringer før selve implementeringen, kan man opdage skævheder i dataen og rette dem, så man sikrer en mere retfærdig proces fra starten."}
