Ogni anno arrivano.
"[Tale e tale posto] è stata classificata come la città più sicura d'America!"
"Le 10 città più pericolose nel 2018"
"Non indovinerai mai la città con il maggior numero di [Insert Crime of Choice]"
Forse è iniziato come una scintilla di curiosità dal mio feed di notizie di Internet Explorer (prima di passare a Google Chrome e non guardarmi indietro...). Più probabilmente, è iniziato quando ero residente ad Albuquerque, che l'ultima volta che ho controllato era purtroppo ancora alle prese con una dilagante ondata di criminalità contro il patrimonio (vedi qui per una visione un po' umoristica della situazione). In ogni caso, sono rimasto incuriosito dalle liste annuali pubblicate da artisti del calibro di Rivista di denaro o Nicchia che pretendono di mostrare le città migliori e/o più sicure d'America.
Come ci si potrebbe aspettare, ci sono un bel po' di informazioni per creare queste classifiche. I migliori siti descriveranno la loro metodologia e spesso varia da sito a sito. Tuttavia, quasi tutti basano le loro informazioni sul tasso di criminalità sul solito gold standard: il Rapporti sui crimini uniformi dell'FBI . Queste segnalazioni sono raccolte su base annuale e contengono i conteggi dei reati denunciati visualizzati in varie tabelle. Di particolare interesse per me (e per coloro che generano queste liste) sono le tabelle che riportavano i reati denunciati a livello cittadino (Tabella 6 per gli anni fino al 2016 e Tabella 8 per il 2017). Dopo alcune "fantasiose" importazioni e manipolazioni di dati, sono stato in grado di compilare un database di reati denunciati per le città degli Stati Uniti dal 2010 al 2017.
Ora, a merito dell'FBI, chiariscono esplicitamente che i loro dati non dovrebbero servire come unica base per confrontare città e altre regioni, molto probabilmente per i seguenti motivi:
- Questi conteggi sono basati su segnalato reati, il che significa che ci sono buone probabilità che il conteggio reale venga sottovalutato.
- Non tutte le città denunciano i loro crimini all'FBI ogni anno. In effetti, ci sono alcuni anni in cui solo una manciata di città in un particolare stato riporta i propri dati.
Ecco perché i siti che effettuano la classifica avranno in genere altri tipi di dati inclusi nei loro calcoli. Per i miei scopi, ero semplicemente interessato a utilizzare i dati come punto di partenza per ulteriori indagini, ma penso comunque che sia importante riconoscere e condividere il loro avvertimento come parte di una buona pratica statistica.
Sgranocchiare i numeri
Dopo aver ottenuto i conteggi riportati, ho quindi calcolato il tasso di criminalità in incidenti per 1.000 residenti. Mentre lo standard abituale è calcolare il tasso per 100.000, ho deciso su questo livello in quanto rende più facile valutare sia le città grandi che quelle piccole (ad esempio, potrebbe essere più difficile pensare a un tasso di criminalità per 100.000 quando hai solo una popolazione di poche migliaia). Ho quindi eseguito un'analisi dei dati esplorativa superficiale, come fanno tutti i buoni statistici. Ho iniziato a cercare le città con i tassi di criminalità più alti e ce n'era, in effetti, una che ha attirato la mia attenzione: Lakeside, CO.
Dai un'occhiata alla Figura 1.
Figure 1: Based on these numbers, you'd seldom find a more wretched hive of scum and villainy!Figure 1: Based on these numbers, you'd seldom find a more wretched hive of scum and villainy!Figure 1: Based on these numbers, you'd seldom find a more wretched hive of scum and villainy!Figure 1: Based on these numbers, you'd seldom find a more wretched hive of scum and villainy!Figura 1: Sulla base di questi numeri, raramente troverai un alveare più miserabile di feccia e malvagità!
Probabilmente hai notato che il tasso di criminalità è su scala logaritmica, il che non può certo essere un buon segno. Ma guarda i numeri! Stiamo parlando di circa 600 crimini violenti ogni 1.000 solo nel 2013 e nel 2014! E il crimine contro il patrimonio è fuori scala! Cos'è questo terribile posto senza legge dove i criminali sembrano correre liberamente?!
Bene, riduciamo il numero di punti esclamativi e pensiamo in modo critico a ciò che stiamo vedendo qui. La prima cosa dovrebbe essere indagare sui numeri che concorrono a calcolare i tassi di criminalità. Così facendo, scopriamo che la vivace metropoli di Lakeside, CO, ha un totale enorme di... otto le persone. Cioè, a partire dal 2011; nel 2010 aveva una popolazione di 19 abitanti. Dobbiamo assicurarci di essere precisi con i nostri numeri qui.
Se osserviamo il conteggio dei crimini violenti per il 2013 e il 2014, sono stati segnalati cinque incidenti. Ora il Rapporto sui crimini dell'FBI suddivide i crimini violenti in quattro categorie: omicidio (omicidio), stupro, rapina e aggressione aggravata. Sarai felice di sapere che non è stato segnalato un omicidio a Lakeside dal 2010 (il che ha anche senso, altrimenti la popolazione sarebbe diminuita in modo significativo dopo il 2013). In effetti, questi conteggi possono essere divisi abbastanza equamente tra rapina e aggressione aggravata.
Ora riguardo al tasso di criminalità contro la proprietà. È ben al di sopra di uno per quasi tutto il tempo, anche se nel 2013 salirà alle stelle. Guardando i conteggi dei reati contro il patrimonio, stiamo parlando di 500-600 incidenze segnalate. Per otto le persone!! Ok, adesso smetto di urlare. Si scopre che, proprio come Violent Crime, l'FBI divide il Property Crime in altre quattro categorie: furto con scasso, furto, furto d'auto e incendio doloso. Ti starai chiedendo qual è la differenza tra furto con scasso e furto e perché questi due sono considerati diversi dalla rapina. È meglio spiegato con alcuni esempi. Il furto con scasso è in genere ciò a cui pensi se sei preoccupato che la tua casa o la tua auto vengano scassinate. Il furto è se sei stato derubato da un borseggiatore o da un ladro di borse. Ciò che distingue quei due dalla rapina è che entrambi non comportano la forza o minacce di violenza contro la vittima. Se qualcuno dovesse puntare una pistola contro di te e richiedere i tuoi oggetti di valore, quella è una rapina. Con questo chiarito (non avevi intenzione di dormire stanotte, giusto?), se approfondiamo i conteggi, la stragrande maggioranza degli incidenti segnalati per crimini contro la proprietà è dovuta a furto, con un'infarinatura di furto con scasso e furto di auto che completano il resto .
Ottenere una seconda opinione
Ora che abbiamo una migliore comprensione di quali tipi di crimini si verificano qui, forse dare un'occhiata a Lakeside stesso potrebbe aiutarci a darci un quadro ancora migliore di ciò che sta accadendo. Nella Figura 2, abbiamo una vista di Google Maps della "città" in questione.Ho aggiunto il contorno rosso per farlo risaltare di più.
Figure 2: Well now we know where the Lake part comes from...Figure 2: Well now we know where the Lake part comes from...Figure 2: Well now we know where the Lake part comes from...Figure 2: Well now we know where the Lake part comes from...Figura 2: Bene, ora sappiamo da dove viene la parte del Lago...
Come puoi vedere, in realtà è un piccolissimo sobborgo dell'area metropolitana di Denver. Ho cerchiato in oro dove vivono gli 8 residenti. Noterai anche che ho evidenziato alcune altre cose in viola. Quello a destra mostra il Lakeside Shopping Center, che presumo sia pieno di tutto ciò di cui i residenti di Lakeside potrebbero aver bisogno o desiderare. Quello a destra è un parco divertimenti (che potresti aver indovinato data l'immagine che Google ha selezionato per accompagnarlo). Dato che questi due costituiscono la maggior parte della "città", puoi iniziare a farti un'idea di cosa potrebbe davvero accadere qui. Non un quadro completo, intendiamoci, ma almeno le cose iniziano ad avere più senso di quanto il tasso di criminalità grezzo possa farti credere.
Data questa situazione, ho deciso di creare un "punteggio del crimine" personalizzato per i miei scopi di analisi che si spera sarebbe più robusto per tali situazioni. Questo punteggio implica prendere il tasso di criminalità e moltiplicarlo per il punteggio di probabilità della città, che è essenzialmente il valore della funzione di distribuzione cumulativa empirica per la popolazione di quella città preso dalla distribuzione empirica stimata tra tutte le popolazioni della città (su base anno per anno per tener conto per eventuali oscillazioni). Il mio ragionamento è il seguente: se hai due città ciascuna con un tasso di criminalità di 500 per 1.000 residenti, ma una ha una popolazione di otto persone e l'altra ha una popolazione di 800 persone, allora potresti considerare la città con una maggiore popolazione per essere davvero insicura rispetto a quella con la popolazione più piccola date le altre sfaccettature che sono coinvolte. Ovviamente, non sostengo che il mio nuovo punteggio di criminalità sia perfetto in alcun modo poiché sono sicuro che qualcuno potrebbe fornire una ragione valida sul perché un'altra metrica potrebbe essere più adatta. Ma sembra fare un lavoro decente per i miei scopi.
La tabella seguente illustra l'impatto dell'utilizzo del mio punteggio personalizzato rispetto al tasso di criminalità grezzo. I dati sono calcolati utilizzando i reati denunciati dal 2016 e, come promemoria, i tassi di criminalità sono in incidenti ogni 1.000 residenti.
| Città |
Popolazione (2016) |
Tasso di criminalità violenta |
Punteggio crimine violento |
Tasso di reati contro la proprietà |
Punteggio del crimine contro la proprietà |
| New York, New York |
8.566.917 |
5.73 |
5.73 |
14.62 |
14.62 |
| Los Angeles, CA |
4.007.905 |
7.19 |
7.19 |
24.74 |
24.73 |
| Chicago, IL |
2.725.153 |
11.05 |
11.05 |
31.91 |
31.9 |
| Cary, NC |
164.835 |
0,92 |
0,91 |
10.05 |
9.89 |
| East St. Louis, IL |
26.769 |
28.28 |
23.78 |
22.56 |
18.97 |
| Lakeside, CO |
8 |
500 |
0.1 |
39875 |
8.33 |
Come puoi vedere, il punteggio di criminalità non può mai superare il tasso di criminalità grezzo (per definizione). Puoi anche vedere come le città più piccole siano maggiormente influenzate, anche dal design. Se guardi la voce di East St. Louis, puoi vedere un esempio di come un tasso di criminalità relativamente alto possa ancora portare a un punteggio di criminalità elevato nonostante la popolazione relativamente piccola, come speravo. Sono disposto ad ammettere che potrebbero esserci casi in cui il punteggio cambia il tasso sufficientemente per alterare negativamente la posizione relativa di una città (ad es. fare in modo che una città con un tasso di criminalità più alto di un'altra cambi improvvisamente posto in termini di punteggio di criminalità), ma direi ciò accadrebbe o con una città molto piccola (cosa che il punteggio è progettato per fare) o con città che hanno un tasso di criminalità molto vicino che il cambiamento è praticamente trascurabile. Ma ancora una volta, sono aperto a critiche costruttive e ad altre misure.
Il contesto è il re
In sintesi, penso che il caso di Lakeside, CO, serva da monito a non accettare mai senza pensare i dati al valore nominale. Anche con qualcosa come un tasso di criminalità, che ha lo scopo di mettere in equilibrio le piccole e grandi città eliminando il divario demografico, ci saranno ancora problemi che non possono essere risolti con una sola misura. È anche un ottimo esempio del motivo per cui dovresti indagare sui valori anomali e non semplicemente eliminarli poiché spesso c'è una preziosa intuizione nascosta nel loro strano comportamento. In entrambi i casi, mostra l'importanza di avere un quadro più completo.
Direi che questo suona anche vero per i dati in generale. Di recente, Albert Cairo ha tenuto un grande discorso sull'accuratezza visualizzazione dei dati . Uno dei suoi punti principali era che lo scopo di un grafico è avviare una conversazione. Ritengo che lo stesso si possa dire di questi dati (e della grafica che ho generato insieme ad essi). Piuttosto che analizzare dal punto di vista della paura (cioè, "Oh wow! Evito quel posto come la peste!!”), scelgo di analizzarlo dal punto di vista della curiosità. Ad esempio, dopo aver trovato una città con un punteggio di criminalità elevato per un determinato crimine, eseguo una rapida ricerca per informazioni più contestuali. Forse la città aveva una fiorente industria che ora è in declino. O forse ha avuto una storia tumultuosa che si sta ancora svolgendo.
Inoltre, capisco perfettamente che non si può trattare un'intera città come un oggetto. Alcune parti di una città soffrono più di altre, quindi ho altre risorse a cui mi rivolgo per una valutazione più completa. Tutto sommato, è come mi piace dire: Context is King (nessun gioco di parole inteso... OK, forse un po').
Ho allegato il mio set di dati che puoi esplorare da solo. Puoi anche controllare alcuni dei grafici che ho generato JMP pubblico , insieme ad altre fantastiche visualizzazioni di altri utenti. Questi grafici possono anche essere generati utilizzando gli script di tabella nella tabella dati allegata.
