Il bias di un'AI è una distorsione sistematica in ciò che un modello prevede o decide, causata da dati di addestramento sbilanciati o da scelte di progetto sbilanciate, che porta a trattare in modo costantemente ingiusto persone o casi simili.
Niente gergo, niente formule
Un modello impara pattern statistici dai dati di addestramento, nient'altro. Se i dati sotto-rappresentano un gruppo o incorporano uno stereotipo, il pattern eredita lo sbilanciamento e lo ripete in scala, con garbo e costanza. I nascondigli più comuni: uno screening di CV addestrato su un decennio di assunzioni passate in cui certi gruppi comparivano raramente; un filtro antifrode che impara il CAP come proxy del rischio; una previsione di domanda che ignora i tuoi depositi più piccoli perché la storia li ignorava. I proxy sono i più subdoli: il modello non vede genere o origine, vede indirizzo, scuola o buco di carriera, e tira la stessa riga. Poi i cicli di retroazione lo consolidano: se il sistema sbilanciato dice no, il dataset successivo avrà ancora meno esempi di sì. Lo intercetti testando gli output tra gruppi prima della messa in produzione (un bias audit), ribilanciando o riponderando i dati, passando le decisioni critiche a un umano, e ritestando dopo ogni aggiornamento. L'AI Act europeo classifica molti di questi usi come ad alto rischio proprio per questo motivo.
L'AI audit è una revisione strutturata di come un'organizzazione usa davvero l'IA: ogni strumento, modello e flusso di lavoro viene inventariato, poi testato su accuratezza, esposizione dei dati, costi e conformità, con i risultati classificati per rischio e un piano di rimedio allegato.
LeggiLa model evaluation è il processo di misurare le prestazioni di un modello su dati che non ha mai visto, con metriche e test set concordati prima, affidandogli decisioni reali solo a valutazione superata.
LeggiL'AI Act europeo è il regolamento che classifica i sistemi di AI per livelli di rischio: le pratiche inaccettabili sono vietate, i sistemi ad alto rischio devono rispettare requisiti di documentazione, qualità dei dati, log e supervisione umana prima di essere venduti o impiegati, agli altri bastano obblighi più leggeri di trasparenza.
Leggi§ 03
Progettiamo e rilasciamo sistemi AI con permessi, log e approvazione umana. Si parte con una call di scoping di 30 minuti.