Come Mentire e Indurre in Errore con le Statistiche sugli Stupri

L'articolo: https://www.datagoneodd.com/blog/2015/01/25/how-to-lie-and-mislead-with-rape-statistics-part-1/

Da fare: finire a copiare i link e le immagini, tradurre la seconda parte. Rileggere.

How To Lie And Mislead With Rape Statistics: Part 1

January 25, 2015 by Francis Walker

Si scopre che solo il 7,8% delle denunce di stupro sono vere.

So che può sembrare difficile da credere, ma non me lo sono inventato. Tecnicamente, è completamente vero. È anche completamente una cavolata. È così fuorviante e costruito su così tante avvertenze non dichiarate, che la maggior parte delle persone lo considererebbe come buono come mentire se sapessero come è stato effettivamente derivato. La cosa interessante è quella statistica che potresti aver sentito, che "solo il 2-8% delle denunce di stupro si rivelano false"? Non solo è altrettanto fuorviante (se non di più), ma proviene dallo stesso identico insieme di dati.

Allora, da dove viene il numero del 2-8%? Se lo hai letto nell'articolo di Zerlina Maxwell sul Washington Post potresti essere ragionevolmente confuso che l'intervallo provenga dall'FBI.

Infatti (nonostante i vari miti popolari), l'FBI riporta che solo il 2-8 percento delle accuse di stupro si rivelano false, una percentuale che è inferiore a quella (10 percento) di persone che mentono sul furto di auto.

Maxwell ha fatto riferimento a un articolo del 2009 che ipotizzava la fascia del 2-8%, ma questo non ha nulla a che fare con le statistiche dell'FBI o i furti d'auto. Tuttavia, esiste una versione precedente dell'articolo del 2009 pubblicata nel 2007 con lo stesso nome che includeva questo dato:

Per esempio, il dipartimento di polizia di Portland, Oregon, ha esaminato 431 denunce di aggressioni sessuali completate o tentate nel 1990 e ha scoperto che l'1,6% di esse sono state determinate essere false. Questo era in confronto con una percentuale del 2,6% per le false denunce di furto di veicoli (Ufficio del Procuratore Generale dell'Oregon, 2006).

Questo proviene da un singolo dipartimento di polizia, in un singolo anno, e non è una statistica dell'FBI. Come si scopre, c'è una statistica rilevante dell'FBI, ma invece dell'1,6%, è dell'8%, il che significherebbe che non si adatterebbe al suo punto riguardo ai furti di veicoli. D'altra parte, c'è anche una statistica separata che dice che circa il 10% delle denunce di furto di veicoli sono false.  OK, quindi ora abbiamo una fonte per la fascia del 2-8%, una stima dell'FBI che è in quella gamma, e un'altra statistica che mostra una percentuale più alta di furti d'auto.  Quindi, mentre lei confonde un po' le sue fonti e ciò rende quello che dice un po' fuorviante, nel complesso il suo punto è accurato, giusto?

È qui che ci imbattiamo in un piccolo problema – stiamo attingendo tutte queste statistiche da posti diversi, quindi come facciamo a sapere che sono abbastanza simili da essere confrontabili? Se Maxwell avesse controllato quella statistica dell'8% dell'FBI, scoprirebbe che effettivamente hanno qualcosa da dire su questo argomento – anche se non si inserisce così bene nel suo racconto. Il numero dell'8% proviene dalla sezione II dei rapporti dell'FBI sul crimine negli Stati Uniti dal 1995 al 1997 che dicono:

1995

La percentuale di "infondatezza", o la percentuale di denunce determinate attraverso l'indagine essere false, è più alta per lo stupro forzato rispetto a qualsiasi altro crimine dell'Indice. Nel 1995, l'8% delle denunce di stupro forzato sono state considerate "infondate", mentre la media per tutti i crimini dell'Indice era del 2%.

1996

La percentuale di "infondatezza", o la percentuale di denunce determinate attraverso l'indagine essere false, è più alta per lo stupro forzato rispetto a qualsiasi altro crimine dell'Indice. L'otto percento delle denunce di stupro forzato nel 1996 sono state considerate "infondate", mentre la media per tutti i crimini dell'Indice era del 2 percento.

1997

Una percentuale più alta di denunce di stupro forzato viene determinata "infondata", o trovata attraverso l'indagine essere falsa, rispetto a qualsiasi altro crimine dell'Indice. Mentre la media delle percentuali di "infondatezza" per tutti i reati dell'Indice del crimine era del 2 percento nel 1997, l'8 percento delle denunce di stupro forzato erano "infondate" nello stesso periodo di tempo.

Quindi, quando si guarda alle cose su una base comparabile e dai dati sui crimini di tutto il paese e su più anni, invece che la percentuale di rapporti infondati sia inferiore per lo stupro rispetto ad altri tipi di crimine, lo stupro forzato ha effettivamente le percentuali più alte di infondatezza ed era costantemente 4 volte la media.

Torniamo alla fascia del 2-8% del 2009. Pensa per un minuto a cosa renderebbe una buona fonte statistica su false denunce di stupro. Data la facilità con cui si possono manipolare le ricerche statistiche, probabilmente vorresti qualcuno di imparziale affinché i dati siano utili. Ora clicca sulla fonte elencata da Maxwell. Si tratta di un articolo che appare in The Voice, il bollettino del National Center for the Prosecution of Violence Against Women. L'articolo è intitolato False Reports: Moving Beyond the Issue to Successfully Investigate and Prosecute Non-Stranger Sexual Assault. OK, quindi non inizia proprio bene sul fronte dell'imparzialità, ma diamogli il beneficio del dubbio e approfondiamo l'articolo.

L'articolo inizia con una nota che le stime delle false denunce di aggressioni sessuali variano parecchio (dall'1,5% al 90%). Poi proseguono dicendo che non trovano molte delle precedenti fonti di dati credibili e tentano di restringere quella fascia. Il primo studio4 che cercano di screditare è stato fatto nel 1994 dal professor Eugene Kanin. In esso, Kanin ha scoperto che il 41% delle 109 denunce di aggressioni sessuali fatte a un dipartimento di polizia del Midwest in un periodo di 9 anni è stato determinato essere falso. Questo sembrerebbe in netto contrasto con la loro affermazione che il numero reale sia del 2-8%. Gli autori presentano due ragioni principali per cui lo studio di Kanin non è valido. La prima è che le determinazioni che le denunce erano false sono state fatte solo dai detective. Lavorano in una citazione da un articolo scritto da David Lisak, uno degli autori del documento (la versione del 2009 comunque):

Kanin non descrive alcuno sforzo per sistematizzare la sua propria "valutazione" dei rapporti di polizia—ad esempio, elencando dettagli o fatti che ha usato per valutare i criteri utilizzati dalla polizia per trarre le loro conclusioni. Né Kanin descrive alcuno sforzo per confrontare la sua valutazione di quei rapporti con quella di un secondo ricercatore indipendente—fornendo un'analisi della "affidabilità". Questo viola una regola fondamentale della scienza, una regola progettata per garantire che le osservazioni non siano semplicemente il riflesso del pregiudizio dell'osservatore (p. 2).

Poi continuano a riassumere questo primo punto come segue:

In altre parole, non c'è modo di esplorare se la classificazione di questi casi come falsi sia stata semplicemente effettuata come risultato delle percezioni e dei pregiudizi dei detective, senza alcuna reale indagine condotta.

Colgo l'occasione per una breve deviazione nella terra dell'ironia. Ricordate come ho detto che c'era una versione precedente di questo articolo di due anni prima? Sebbene David Lisak non fosse un autore di quel documento (il suo posto fu preso dal Dr. Alan Berkowitz), gli altri due autori - Dr. Kimberly A. Lonsway e il Sergente Joanne Archambault (in pensione) - lo erano. In quella versione, la fascia "credibile" era del 2-4% invece del 2-8% e offrivano tre pezzi di evidenza a sostegno. Il primo è il dato del Dipartimento di Polizia dell'Oregon (sembra che la polizia sia perfettamente in grado di una determinazione imparziale - finché il numero che ottengono ti piace). Il secondo era questo:

Similmente, il Sergente Joanne Archambault della Divisione Crimini Sessuali del Dipartimento di Polizia di San Diego ha valutato regolarmente la percentuale di false denunce per diversi anni e le ha trovate essere intorno al 4%

Il pregiudizio dell'osservatore può essere un vero problema, ma funziona in entrambi i modi. Più tardi arriveremo alle prove che stanno usando per la loro nuova stima (fortunatamente hanno scartato le prime due fonti del 2007 questa volta). Quando lo facciamo, tenete a mente quali tipi di vedute avevano in partenza. Torniamo allo studio di Kanin. La loro principale preoccupazione è essenzialmente che la polizia sta facendo la determinazione vero/falso da sola, potenzialmente a capriccio senza molta indagine, che in superficie è una lamentela piuttosto valida. Tranne che, ovviamente, per il fatto che rappresenta completamente in modo errato come sono stati determinati i rapporti falsi. Quello che vogliono farvi pensare è che si tratta solo di un gruppo di poliziotti che non credono alle donne e quindi classificano come false senza indagare affatto sui dettagli. Possono farlo perché sanno che praticamente nessuno andrà veramente a leggere la ricerca sottostante. Se lo facessi, troveresti questo proprio all'inizio nella sezione dei metodi:

Questa città è stata presa di mira per lo studio perché offriva un laboratorio quasi modello per studiare le false denunce di stupro. Primo, la sua agenzia di polizia non è sommersa da gravi casi di crimini gravi e, quindi, ha la libertà e la motivazione di registrare e perseguire a fondo tutte le denunce di stupro. Infatti, la politica dell'agenzia vieta agli agenti di polizia di usare la loro discrezione nel decidere se riconoscere ufficialmente una denuncia di stupro, indipendentemente da quanto quella denuncia possa essere sospetta. Secondo, la dichiarazione di un'accusa falsa segue una procedura altamente istituzionalizzata. L'indagine su tutte le denunce di stupro prevede sempre un'offerta seria di sottoporre a poligrafo le denuncianti e i sospettati. Inoltre, per una dichiarazione di accusa falsa da emettere, la denunciante deve ammettere che nessuno stupro è avvenuto. Lei è l'unico agente che può dire che l'accusa di stupro è falsa. Il dipartimento di polizia non dichiarerà un'accusa di stupro come falsa quando la denunciante, per qualsiasi motivo, non prosegue con l'accusa o coopera sul caso, indipendentemente da quanto dubbio la polizia possa avere riguardo la validità dell'accusa. In breve, questi casi sono dichiarati falsi solo perché la denunciante ha ammesso che sono falsi. Inoltre, solo una persona è poi autorizzata a inserire nei registri una dichiarazione formale che l'accusa è falsa, l'ufficiale responsabile dei registri. Infine, si dovrebbe notare che questo dipartimento non confonde i tentativi di stupro denunciati con gli stupri completati. Pertanto, le denuncianti di stupro menzionate in questo documento si riferiscono a stupri forzati completati solo. Ciò che precede ci lascia con una certa fiducia che i casi dichiarati falsi da questa agenzia di polizia sono effettivamente una riflessione ragionevole - se non minima - delle false denunce di stupro fatte a questa agenzia, specialmente quando si considera che una scoperta di falsa denuncia è totalmente dipendente dalla ritrattazione dell'accusa di stupro.

Dato che questo è internet e quella era una lunga citazione, permettetemi di riassumerla

• Gli agenti di polizia sono vietati di usare la loro discrezione nel decidere se una denuncia è falsa
• Una denuncia è determinata essere falsa se, e solo se, la denunciante ammette che nessuno stupro è avvenuto

La credibilità è importante qui. Per credere nella fascia del 2-8%, devi accettare la premessa che gli autori dell'articolo hanno esaminato la ricerca pertinente e distillato in modo equo e accurato i dati in quella gamma. Con quello che ora sai sulla metodologia, fai a te stesso la seguente domanda: la visione presentata dagli autori rappresenta equamente e con precisione i fatti dello studio?

Passiamo al loro secondo problema con lo studio di Kanin.

Questa preoccupazione è aggravata dal fatto che la pratica di questo particolare dipartimento di polizia era di fare un'offerta "seria di sottoporre a poligrafo" tutte le denuncianti e i sospettati di stupro (Kanin, 1994, p. 82). Infatti, questa pratica "è stata rifiutata e, in molti casi, messa al bando a causa del suo impatto intimidatorio sulle vittime" (Lisak, 2007, p. 6).

Devo fare un'altra deviazione qui. Le persone usano molte tattiche diverse quando cercano di convincerti di cose e alcune sono più efficaci di altre. Non so voi, ma citare se stessi come autorità è abbastanza in fondo alla lista delle cose che mi convincono. Ha un po' quel senso di "Il mio punto è davvero grande, ma sembra che io sia l'unico a farlo". A volte può essere una buona opzione, e sono sicuro che se continuo a fare blogging abbastanza a lungo finirò per farlo alcune volte anch'io, ma nel contestare lo studio di Kanin gli autori usano tre diverse citazioni - e sono tutti lo stesso articolo di Lisak. Oh e solo per punti bonus, quell'articolo di Lisak che continuano a citare? In esso Lisak cita la versione 2007 di False Reports di Lonsway e Archambault. Quindi suppongo che lo renda un'autorità al quadrato? Mettendo da parte il fatto che le loro fonti di critica dello studio di Kanin sembrano venire solo da uno degli autori stessi, la loro lamentela non è del tutto priva di merito. Nell'articolo di base Lisak nota che quando gli investigatori esprimono dubbio durante le interviste alle potenziali vittime può causare sentimenti di confusione, vergogna e auto-colpa. Non sto per contestare questo o dire che penso che l'uso del poligrafo da parte della polizia sia una buona politica. Tuttavia, non sono davvero sicuro di come questo confuti il fatto che, in questo caso, il 41% delle donne ha ammesso di aver inventato l'accusa. In effetti, Kanin stesso affronta questo punto molto nel suo studio

Un'obiezione possibile a queste ritrattazioni riguarda la loro validità. Le ritrattazioni dello stupro potrebbero essere il risultato del desiderio delle denuncianti di evitare un "secondo assalto" per mano della polizia. Piuttosto che procedere con la vera accusa di stupro, si potrebbe argomentare, queste donne hanno ritirato le loro accuse per evitare il trauma dell'indagine della polizia. Diverse risposte sono possibili a questo tipo di critica. Primo, con pochissime eccezioni, queste denuncianti erano sospette al momento della denuncia o entro uno o due giorni dopo l'accusa. Queste ritrattazioni non sono seguite a lunghi periodi di indagine e interrogatorio che costituirebbero qualcosa che si avvicina a un secondo assalto. Secondo...nei casi in cui è stato identificato e interrogato un sospetto, i fatti della ritrattazione si accordavano con la difesa del sospetto. Ultimo, la politica di questa agenzia di polizia è di applicare uno statuto riguardante la falsa denuncia di un reato grave. Dopo la ritrattazione, la denunciante è informata che sarà accusata di aver presentato una falsa denuncia, punibile con una multa sostanziosa e una pena detentiva. In nessun caso, è stato fatto uno sforzo da parte della denunciante per ritrattare la ritrattazione.

Non fraintendetemi, non sono così ingenuo da dire che non esista una cosa come una falsa confessione. Tuttavia le false confessioni non accadono solo così - sono fatte per certe ragioni, e non sono davvero sicuro che queste ragioni abbiano molto a che fare con le situazioni qui discusse. Le false confessioni fatte nel tentativo di porre fine a lunghe ore di interrogatori coercitivi, o per evitare violenza fisica hanno senso. Quello che non ha senso è l'idea che queste donne ammettano di aver inventato le accuse e forniscano spiegazioni che si accordano con altri fatti del caso invece di alzarsi e andarsene se si sentivano a disagio con le domande. Ha ancora meno senso quando poi vengono informate che saranno accusate di falsa denuncia e continuano ad attenersi alla storia che hanno inventato tutto.

Non devi solo prendere la mia parola per buona però, possiamo usare un po' di matematica semplice per aiutarci a valutare queste affermazioni. Se la fascia del 2-8% è corretta, quante delle confessioni nello studio di Kanin sarebbero false? Per evitare problemi di arrotondamento, moltiplichiamo tutti i numeri riportati per 1.000 (quindi i rapporti totali passano da 109 a 109.000 e il numero di donne che confessano di aver fatto false denunce passa da 45 a 45.000). Se assumiamo che il tasso effettivo di falsa denuncia sia dell'8%, ci sarebbero 8.720 denunce che erano effettivamente false. Ciò significa che l'80,6% delle volte (36.280 casi), le donne ammettevano di aver inventato la denuncia e accettavano la punizione per averlo fatto, nonostante ci fosse stato realmente uno stupro. In realtà, il numero è probabilmente ancora più alto. Ricordate che lo studio di Kanin conta una denuncia come falsa solo se la donna ammette che era falsa. I numeri sopra assumono che il 100% delle donne che hanno presentato denunce false vengano scoperte e ammettano di averlo fatto. Se solo il 75% di coloro che presentano false denunce confessano, allora passa da un tasso di false confessioni dell'80,6% all'85,5%. La seguente tabella mostra il tasso di false confessioni basato su una varietà di tassi effettivi di false denunce (sul lato sinistro) e tassi di confessione dei falsi denuncianti (in cima).

Quindi la domanda che devi farti è: sembra un intervallo plausibile per la percentuale di false confessioni in situazioni in cui le donne sono libere di andarsene senza confessare e affrontano multe e tempi di carcere se lo fanno?

C'è una cosa finale che trovo curiosa nella loro critica allo studio di Kanin. Se pensano che l'uso del poligrafo stia influenzando così tanto i risultati dello studio, si penserebbe che almeno menzionino l'addenda allo studio che descrive un diverso insieme di dati a cui hanno successivamente avuto accesso. Nel 1998 Kanin ha ottenuto l'accesso ai registri di polizia di due grandi università statali del Midwest. Il risultato? In un periodo di tre anni, il 50% delle denunce di stupro forzato erano false. Ancora una volta, solo i casi che includevano una ritrattazione dell'accusa venivano classificati come falsi, e questa volta non veniva usato il poligrafo. Ecco cosa ha detto Kanin su quei dati

In entrambe le agenzie di polizia, la presa della denuncia e il successivo seguito dell'indagine era la responsabilità esclusiva di un ufficiale femminile di alto rango. Nessuna agenzia ha impiegato il poligrafo e nessuna ha dichiarato la denuncia falsa senza una ritrattazione dell'accusa. Più sorprendente è la modellazione dei motivi delle false accuse date dalle denuncianti, una modellazione simile a quella trovata per le denuncianti non studentesse della città. Circa la metà (53%) delle false accuse sono state verbalizzate come aventi una funzione di alibi. In ogni caso, un coinvolgimento sessuale consensuale ha portato a problemi la cui soluzione sembrava essere trovata nel presentare un'accusa di stupro. Le denunce motivate dalla vendetta, circa il 44%, erano della stessa natura apparentemente banale e meschina come quelle incontrate dall'agenzia di polizia della città.

Dato il tempo che ho speso a difendere lo studio di Kanin, potresti pensare che io lo consideri una sorta di standard oro - non lo faccio. Ci sono una serie di lamentele valide sullo studio. Prima di tutto, lo studio iniziale è di una città del Midwest con una popolazione di 70.000 e anche le università erano del Midwest, quindi non si può affidabilmente estrapolare questi tassi come indicativi di tutto il paese. In secondo luogo, i dati sono piuttosto datati a questo punto, con lo studio pubblicato nel 1994 e addenda del 1998, quindi non ci danno necessariamente molte informazioni su come stanno le cose attualmente. Tuttavia, le critiche che Lonsway et al hanno scelto di sollevare non sono solo deboli, ma significativamente fuorvianti. [Aggiornamento: ho scritto di più sui difetti dello studio di Kanin qui]

Quindi se questi sono i dati che non gli piacciono, su quale tipo di dati pensano che dovremmo affidarci? Controlla presto per Come Mentire e Indurre in Errore con le Statistiche sugli Stupri: Parte 2.

UPDATE: Part 2 is now available.