2025-11-21T02:31:16.003696

Evidence Without Injustice: A New Counterfactual Test for Fair Algorithms

Loi, Di Bello, Cangiotti
The growing philosophical literature on algorithmic fairness has examined statistical criteria such as equalized odds and calibration, causal and counterfactual approaches, and the role of structural and compounding injustices. Yet an important dimension has been overlooked: whether the evidential value of an algorithmic output itself depends on structural injustice. Our paradigmatic pair of examples contrasts a predictive policing algorithm, which relies on historical crime data, with a camera-based system that records ongoing offenses, both designed to guide police deployment. In evaluating the moral acceptability of acting on a piece of evidence, we must ask not only whether the evidence is probative in the actual world, but also whether it would remain probative in nearby worlds without the relevant injustices. The predictive policing algorithm fails this test, but the camera-based system passes it. When evidence fails the test, it is morally problematic to use it punitively, more so than evidence that passes the test.
academic

Evidenza Senza Ingiustizia: Un Nuovo Test Contraffattuale per Algoritmi Equi

Informazioni Fondamentali

  • ID Articolo: 2510.12822
  • Titolo: Evidence Without Injustice: A New Counterfactual Test for Fair Algorithms
  • Autori: Michele Loi, Marcello Di Bello, Nicolò Cangiotti
  • Classificazione: cs.CY (Informatica e Società), cs.AI (Intelligenza Artificiale), cs.LG (Apprendimento Automatico)
  • Data di Pubblicazione: 10 ottobre 2025
  • Link Articolo: https://arxiv.org/abs/2510.12822

Riassunto

Questo articolo esamina una dimensione trascurata ma cruciale dell'equità algoritmica: se il valore probatorio dell'output algoritmico stesso dipende dall'ingiustizia strutturale. Gli autori, confrontando due casi di algoritmi per il policing—sistemi di policing predittivo basati su dati storici di criminalità e sistemi basati su registrazioni video di crimini in corso—propongono un nuovo standard di valutazione morale. Questo standard richiede di considerare non solo se l'evidenza possiede forza probatoria nel mondo reale, ma anche se mantiene tale forza in mondi possibili vicini privi dell'ingiustizia rilevante. Il policing predittivo non supera questo test, mentre i sistemi basati su telecamere sì.

Contesto di Ricerca e Motivazione

Problema Centrale

La ricerca esistente sull'equità algoritmica si concentra principalmente su standard statistici (come l'uguaglianza delle probabilità, la calibrazione), metodi causali e contraffattuali, e il ruolo dell'ingiustizia strutturale e composita, ma trascura una dimensione critica: se il valore probatorio dell'output algoritmico stesso dipende dall'ingiustizia strutturale.

Importanza del Problema

  1. Divergenza di Intuizioni Morali: Sebbene entrambi gli algoritmi di policing producano impatti sproporzionati sulle comunità minoritarie, le persone hanno intuizioni diverse sulla loro accettabilità morale
  2. Lacuna Teorica: Le teorie di equità esistenti non riescono a spiegare perché gli algoritmi basati su telecamere siano moralmente più accettabili del policing predittivo
  3. Esigenze di Applicazione Pratica: È necessario un quadro più sofisticato per guidare l'uso di algoritmi in settori sensibili come la giustizia penale e l'assistenza sanitaria

Limitazioni degli Approcci Esistenti

  1. Standard Statistici: Non riescono a catturare le differenze morali tra i due algoritmi, poiché entrambi producono tassi di errore diversi tra gruppi razziali
  2. Approcci Causali: Trattano la razza come una variabile discreta manipolabile, ignorando l'incorporazione della razza in fenomeni strutturali complessi
  3. Teoria dell'Ingiustizia Composita: Si applica ugualmente a entrambi gli algoritmi, non riuscendo a distinguere le loro differenze morali

Contributi Fondamentali

  1. Propone il Principio di Indipendenza Contraffattuale (CIP): Un nuovo quadro di valutazione morale per determinare l'accettabilità degli algoritmi basati su evidenza
  2. Stabilisce il Metodo di Test CIP: Passaggi sistematici per valutare se l'evidenza mantiene forza probatoria in mondi privi di ingiustizia strutturale
  3. Fornisce Guida Applicativa Interdisciplinare: Applica il principio ai settori della giustizia penale e dell'assistenza sanitaria, dimostrando l'utilità pratica
  4. Distingue Applicazioni Punitive e di Supporto: Fornisce guida morale differenziata per diversi tipi di applicazioni algoritmiche

Dettagli Metodologici

Definizione del Principio di Indipendenza Contraffattuale (CIP)

Il CIP comprende due componenti fondamentali:

Test CIP

Per l'evidenza E riguardante un risultato O (come la localizzazione del crimine), verificare se E mantiene valore probatorio rispetto a O in mondi possibili vicini privi dell'ingiustizia strutturale rilevante. Se sì, E supera il test; altrimenti fallisce.

Guida per l'Uso a Valle

Se E supera il test CIP è una considerazione moralmente rilevante per determinare il suo uso a valle accettabile. Per l'uso punitivo dell'evidenza (come il dispiegamento di polizia o la restrizione della libertà individuale), si dovrebbe essere più cauti quando l'evidenza non supera il test CIP rispetto a quando lo supera.

Passaggi Specifici del Test CIP

  1. Identificazione del Meccanismo: Determinare il meccanismo che rende l'evidenza E rilevante per il risultato O
  2. Giudizio di Ingiustizia: Determinare se tale meccanismo fa parte dell'ingiustizia strutturale
  3. Valutazione del Mondo Contraffattuale: Se sì, valutare il mondo contraffattuale vicino in cui il meccanismo ingiusto è rimosso, chiedendosi se il collegamento dell'evidenza rimane valido
  4. Conclusione: Se rimane valido, E supera il test CIP; altrimenti fallisce

Esempio di Analisi della Catena Causale

Catena Causale del Policing Predittivo:

Comunità Minoritarie → Politiche di Redlining → Segregazione Razziale → 
Sottoinvestimento Comunitario → Finanziamento Scolastico Insufficiente → 
Opportunità Occupazionali Limitate → Povertà Concentrata → Maggiore Criminalità

Catena Causale dell'Evidenza da Telecamera:

Crimine in Comunità Minoritarie → Telecamera Cattura il Criminale → 
Informazione sulla Localizzazione del Crimine

Distinzione dai Metodi Esistenti

Il CIP evita i problemi degli approcci causali tradizionali:

  • Non richiede la manipolazione della variabile razza: Piuttosto, chiede se la relazione di evidenza rimane valida in assenza di meccanismi ingiusti
  • Si concentra sulla rilevanza epistemica dell'evidenza: Piuttosto che sulla sensibilità dell'output algoritmico ai cambiamenti razziali
  • Riconosce l'incorporazione strutturale della razza: Non tratta la razza come una variabile indipendentemente manipolabile

Configurazione Sperimentale e Casi di Applicazione

Applicazione nel Settore della Giustizia Penale

Valutazione dell'Evidenza Tradizionale

  • Campioni di DNA, impronte digitali, registrazioni video: Superano il test CIP, poiché il loro valore probatorio si basa su un collegamento causale con il crimine, non dipende da condizioni sociali ingiuste
  • Evidenza di carattere e storia criminale: Potrebbero non superare il test se il loro valore predittivo dipende dall'ambiente criminale causato dall'ingiustizia strutturale

Valutazione degli Strumenti Algoritmici

  • Algoritmi di corrispondenza del DNA, autenticazione di registrazioni di sorveglianza: Superano il test CIP
  • Sistemi di policing predittivo come PredPol, HunchLab: Non superano il test, poiché dipendono dall'aggregazione dello spazio criminale causata dall'ingiustizia strutturale
  • Strumenti predittivi basati sulla rivittimizzazione immediata: Potrebbero superare il test

Applicazione nel Settore dell'Assistenza Sanitaria

Analisi di Tre Scenari

  1. Scenario di Fattori Genetici:
    • Il paziente ha ridotta capacità di metabolizzare i farmaci a causa di variazioni genetiche
    • Risultato CIP: Supera il test, la variazione genetica rimane rilevante in un mondo equo
  2. Scenario di Comorbilità:
    • Comorbilità come il diabete di tipo 2 riducono l'efficacia del farmaco, ma la prevalenza è influenzata dall'ingiustizia strutturale
    • Risultato CIP: Supera il test, la relazione biologica rimane valida in un mondo equo
  3. Scenario di Variabili Sociali:
    • L'algoritmo predice i risultati del trattamento basandosi su variabili sociali come basso reddito, instabilità abitativa
    • Risultato CIP: Non supera il test, in un mondo più equo queste variabili non prevedrebbero più gli effetti del trattamento

Risultati Sperimentali e Scoperte

Scoperte Principali

  1. Spiegazione delle Differenze Morali: Il CIP spiega con successo perché gli algoritmi basati su telecamere sono moralmente più accettabili del policing predittivo
  2. Applicabilità Interdisciplinare: Il principio dimostra valore pratico sia nel settore della giustizia penale che in quello dell'assistenza sanitaria
  3. Distinzione dei Tipi di Applicazione: Le applicazioni punitive rispetto a quelle di supporto richiedono considerazioni morali diverse

Effetto di Inversione tra Applicazioni Punitive e di Supporto

  • Applicazioni Punitive: L'evidenza che non supera il test CIP dovrebbe essere utilizzata con cautela
  • Applicazioni di Supporto: Il mancato superamento del test CIP fornisce invece una ragione aggiuntiva per utilizzare l'evidenza per interventi rimediali

Analisi di Casi Specifici

Progetto di Prevenzione del Diabete

  • I dati storici mostrano che alcune comunità minoritarie hanno rischio di diabete più elevato
  • Sebbene l'evidenza non superi il test CIP, ciò rafforza la ragione per utilizzarla per guidare l'assistenza preventiva

Policing Comunitario

  • I dati storici di criminalità possono essere utilizzati per interventi di supporto: miglioramento dell'illuminazione stradale, programmi di mediazione comunitaria
  • Piuttosto che solo per misure punitive: aumento delle pattuglie, espansione delle perquisizioni di fermata

Lavori Correlati

Contesto della Ricerca sull'Equità Algoritmica

  1. Standard di Equità Statistica: Uguaglianza delle probabilità, calibrazione, ecc.
  2. Equità Causale: Equità contraffattuale specifica del percorso di Chiappa & Gillam
  3. Equità Contraffattuale: Approccio contraffattuale individuale di Kusner et al.
  4. Ingiustizia Strutturale: Teoria dell'ingiustizia strutturale di Young
  5. Giustizia Predittiva: Principio di parità predittiva di Lazar & Stone

Contributi Unici di Questo Articolo

  • Svolta verso la Teoria dell'Evidenza: Dal focus sull'output algoritmico al focus sulla posizione morale dell'evidenza stessa
  • Analisi a Livello di Meccanismo: Analisi approfondita dei meccanismi causali che conferiscono forza probatoria all'evidenza
  • Distinzione Orientata all'Applicazione: Fornisce guida differenziata per diversi tipi di applicazioni

Conclusioni e Discussione

Conclusioni Principali

  1. Il CIP Fornisce una Nuova Dimensione di Valutazione Morale: Integra le teorie di equità algoritmica esistenti
  2. Lo Status Morale dell'Evidenza Conta: Non si deve considerare solo la performance statistica dell'algoritmo, ma anche l'accettabilità morale della sua base di evidenza
  3. Il Tipo di Applicazione Determina i Requisiti Morali: Le applicazioni punitive e di supporto richiedono standard morali diversi

Limitazioni

  1. Sfide Epistemologiche del Ragionamento Contraffattuale: La valutazione di mondi privi di ingiustizia strutturale richiede una teoria causale solida
  2. Difficoltà nell'Identificazione di Meccanismi Causali Complessi: In pratica potrebbe essere difficile identificare accuratamente tutti i meccanismi causali rilevanti
  3. Ambiguità dei Confini Applicativi: Il confine tra applicazioni punitive e di supporto potrebbe non essere chiaro in alcuni casi

Direzioni di Ricerca Futura

  1. Operazionalizzazione del CIP: Sviluppare strumenti e linee guida più concrete per applicare il test CIP
  2. Estensione Interdisciplinare: Applicare il principio ad altri settori sensibili come l'educazione e l'occupazione
  3. Integrazione con Standard di Equità Esistenti: Esplorare meccanismi di coordinamento tra il CIP e gli standard di equità statistica

Valutazione Approfondita

Punti di Forza

  1. Forte Innovazione Concettuale: Propone una nuova dimensione della ricerca sull'equità algoritmica, colmando un'importante lacuna teorica
  2. Fondamenti Filosofici Solidi: Introduce intuizioni dalla teoria dell'evidenza e dalla filosofia morale nella discussione sull'equità algoritmica
  3. Alto Valore Pratico: Fornisce un quadro di guida morale concreto per il dispiegamento effettivo di algoritmi
  4. Argomentazione Rigorosa: Supporta i punti centrali attraverso analisi dettagliate di casi e argomentazione comparativa
  5. Integrazione Interdisciplinare: Integra con successo prospettive dall'informatica, filosofia, diritto e politica pubblica

Insufficienze

  1. Sfide di Operazionalizzazione: L'applicazione del test CIP in scenari reali complessi potrebbe affrontare difficoltà pratiche
  2. Dipendenza da Giudizi di Valore: Cosa costituisce "ingiustizia strutturale" comporta di per sé giudizi di valore, potenzialmente controversi
  3. Complessità Computazionale: La valutazione di scenari contraffattuali in reti causali complesse potrebbe presentare sfide computazionali
  4. Relatività Culturale: La comprensione della giustizia potrebbe differire tra diversi contesti sociali e culturali

Valutazione dell'Impatto

  1. Contributo Accademico: Apre una nuova direzione teorica nella ricerca sull'equità algoritmica
  2. Valore Politico: Fornisce riferimenti importanti per i governi e le organizzazioni nella formulazione di politiche di utilizzo degli algoritmi
  3. Guida Pratica: Fornisce ai sviluppatori e ai distributori di algoritmi un quadro di decisione morale
  4. Impatto Interdisciplinare: Potrebbe influenzare la ricerca correlata in diritto, politica pubblica, etica e altri campi

Scenari di Applicabilità

  1. Applicazioni Algoritmiche ad Alto Rischio: Particolarmente adatto ai settori sensibili come la giustizia penale, la medicina e l'educazione
  2. Formulazione di Politiche: Fornisce supporto teorico per i governi nella formulazione di politiche di governance algoritmica
  3. Audit Algoritmico: Fornisce un quadro di valutazione per gli audit algoritmici di terze parti
  4. Decisioni dei Comitati Etici: Fornisce uno strumento per i comitati etici istituzionali nella valutazione dei progetti algoritmici

Bibliografia

Questo articolo cita importanti letteratura da più campi, inclusa l'equità algoritmica, l'ingiustizia strutturale, e la teoria dell'evidenza, tra cui:

  • Equità Algoritmica: Equità contraffattuale di Kusner et al. (2017), equità specifica del percorso di Chiappa & Gillam (2018)
  • Ingiustizia Strutturale: Teoria dell'ingiustizia strutturale di Young (2011), ingiustizia composita di Hellman (2023)
  • Ricerca Empirica: Ampia ricerca empirica sugli effetti delle politiche di redlining, segregazione razziale su criminalità e salute
  • Teoria Legale: Letteratura correlata sull'uso dell'evidenza statistica nei procedimenti legali

Questo articolo fornisce un importante contributo teorico alla ricerca sull'equità algoritmica. Il Principio di Indipendenza Contraffattuale proposto non solo possiede profonde intuizioni filosofiche, ma anche significativo valore pratico. Sebbene affronti ancora sfide nell'operazionalizzazione, indica una direzione importante per lo sviluppo futuro del campo.