Si sta addentrando nella parte più profonda dell'inverno a Saratoga Springs, New York. Questo è il periodo dell'anno in cui mi siedo con una cioccolata calda, guardo la neve e penso. Il nuovo anno è un momento contemplativo per molte culture: un momento per valutare i nostri difetti, prendere decisioni per migliorare o cambiare. Dire che sono introspettivo in questo periodo dell'anno è un eufemismo. Non so cosa sia l'inverno, ma mi mette in uno stato mentale profondamente contemplativo. Mi vengono molte idee durante questo periodo dell'anno per progetti e scrittura. Questa piccola riflessione si è cristallizzata per tutto il fine settimana - una voce polverosa e anziana nella mia testa, tipo Jean Pastore ricordando il suo tempo a Cleveland Street, tranne che il mio parla di dati, analisi e piatto mongolo...
Piatto caldo mongolo
Durante la prima settimana di gennaio, ho partecipato a una riunione di pianificazione con gli altri membri del team NY JMP a New York. Abbiamo deciso di fare una piccola attività di team building durante un viaggio in un ristorante mongolo Hot Pot a China Town. Ecco una foto:
Your New York JMP Account Team: (from right to left) Brendan Leary, Tracey Bailey, & Mike AndersonYour New York JMP Account Team: (from right to left) Brendan Leary, Tracey Bailey, & Mike AndersonYour New York JMP Account Team: (from right to left) Brendan Leary, Tracey Bailey, & Mike AndersonYour New York JMP Account Team: (from right to left) Brendan Leary, Tracey Bailey, & Mike Anderson Il team dell'account JMP di New York: (da destra a sinistra) Brendan Leary, Tracey Bailey e Mike Anderson
Ora, prima di pensare che questo sia un diario di viaggio, aspetta un secondo. Ho ragione. Innanzitutto, il ristorante è eccellente: dovresti andare se ti trovi in zona. Basta Google. In secondo luogo, durante il pasto, stavamo discutendo di come fornissero istruzioni su come "fare" il piatto mongolo caldo - l'ordine in cui le diverse cose venivano aggiunte alla zuppa per cucinare e per quanto tempo dovevano rimanere nel brodo.
The heavenly elixir that is Mongolian Hot Pot. The stuff on the right is super spicy, the stuff on the left, not so much.The heavenly elixir that is Mongolian Hot Pot. The stuff on the right is super spicy, the stuff on the left, not so much.The heavenly elixir that is Mongolian Hot Pot. The stuff on the right is super spicy, the stuff on the left, not so much.The heavenly elixir that is Mongolian Hot Pot. The stuff on the right is super spicy, the stuff on the left, not so much.L'elisir paradisiaco che è il piatto mongolo. La roba a destra è super piccante, la roba a sinistra, non così tanto.
Mi ha fatto pensare a quante delle mie esperienze culinarie preferite avessero tutte una componente rituale. Hot Pot, etiope, sushi, cena del Ringraziamento, persino preparare la pizza per la mia famiglia il venerdì sera: abbiamo l'abitudine di creare rituali attorno al consumo di cibo. Danno all'esperienza un significato e un significato aggiunti. I rituali del cibo possono riunire le persone e cementare le relazioni. E, nel mio attuale stato d'animo contemplativo, mi ha fatto girare le ruote.
Rituali analitici
Ora, cosa c'entra questo con JMP o con l'analisi in generale? Bene, più tardi quella notte stavo pensando a come i rituali affiorano in altre parti dell'esperienza umana – e non sto necessariamente parlando di osservanza religiosa qui. Nel corso degli anni, ho visto molti casi in cui l'analisi è stata ritualizzata. E si scopre che questo può essere un grosso problema.
Tutti i rituali hanno un attributo comune. Il loro obiettivo è insegnare o ricordare attraverso le azioni. Generalmente hanno anche una sorta di struttura (culturale, sociale, ecc.) per rafforzare il significato dei rituali. I rituali analitici iniziano in modo simile, con un tentativo di codificare una best practice o qualcosa che ha funzionato bene per qualcuno in modo che non venga dimenticato. Questi rituali analitici hanno molti nomi: procedure, SOP, macro, modelli, storie di successo, ecc. E, sinceramente, va bene e probabilmente è una buona cosa. La ritualizzazione della pratica analitica fa quello che fa qualsiasi rituale. Aggiunge significato alla pratica. Ritualizzando l'analisi, ne eleviamo l'importanza in un'organizzazione, in particolare quando la leadership adotta o approva i rituali. Come accade comunemente, i rituali analitici generalmente diventano parte della cultura di un'organizzazione, diventano parte integrante del suo DNA. Ed è qui che iniziano i problemi: quand'è stata l'ultima volta che hai riflettuto bene sul tuo DNA?
Il problema con i rituali analitici
Il problema che si presenta con i rituali analitici è che, come tutti i rituali, possono spostarsi nel tempo da cosciente osservanza a rote osservanza, cioè, solo seguendo i movimenti. E quando ciò accade, perdono il loro significato. Questo è particolarmente facile per i rituali analitici perché non hanno necessariamente la struttura di supporto culturale o sociale per legare il significato alle azioni. L'analisi, sulle scale organizzative che stiamo vedendo oggi, è abbastanza nuova e non sempre viene fornita con la conoscenza tribale intrinseca o la cautela che derivano da altre scienze. E questo è un problema.
Per i rituali analitici, la perdita di significato è particolarmente pericolosa. Poiché il significato contiene il motivo dell'analisi, le ipotesi che vengono fatte e i casi d'uso appropriati: il Perché del rituale – la perdita di significato può portare a un'errata applicazione dell'analisi. In definitiva, i rituali analitici privati del loro significato sono morti e pericolosi. Nel corso della mia carriera, ho visto molti casi in cui è evidente che un prezioso rituale analitico ha perso il suo significato ei devoti stanno solo eseguendo i movimenti – e forse non i movimenti corretti. Lasciate che vi faccia qualche esempio.
La guerra al valore P
Poco fa, stavo leggendo un articolo su come alcune riviste scientifiche stessero iniziando a scoraggiare la segnalazione di valori p o dei criteri di significatività p <0,05. L'argomento era che le persone usavano ciecamente i criteri, o in alcuni casi modificavano i risultati in modo da poter riportare un risultato favorevole rispetto al valore p. La situazione reale è un po' più complessa.
Ad un certo punto in passato, i ricercatori sono stati istruiti in statistica e hanno iniziato a riportare i valori p come una comoda scorciatoia del significato dei risultati o della forza delle tendenze nei loro dati. Questa pratica è stata incorporata in un rituale analitico dalle riviste con una linea guida di p <0,05 come punto di riferimento per la significatività. Questa è una buona cosa: il valore p è una metrica eccellente per riportare i valori, a condizione che il contesto venga mantenuto insieme ai motivi per la scelta di particolari criteri di valore p. Inoltre, un livello di clip di p <0,05 per il test di ipotesi è ampiamente utilizzato ed è generalmente sufficiente per molte applicazioni, a condizione che il professionista capisca che si tratta di una linea guida che deve essere interpretata in modo critico e non meccanicamente.
Il problema qui è venuto quando il significato del rituale, insieme al suo contesto, è andato perduto. Rituali vuoti conducono su cattive strade, come si è visto nelle discipline in cui queste linee guida del valore p si sono trasformate in regole del valore p. Le regole del valore p hanno a loro volta promosso o abilitato comportamenti indesiderati.
Foglio di lavoro Il caso del punto di cambiamento
A proposito di cattive strade, parliamo del venerabile (o famigerato, se preferite) modello di analisi. Molte organizzazioni, nel tentativo di semplificare il lavoro del proprio staff tecnico o di compensare una lacuna nelle conoscenze istituzionali, sviluppano modelli analitici in fogli di calcolo o analisi standard in hub analitici online. Si potrebbe obiettare che questa codificazione delle analisi è una buona cosa, e sarei d'accordo, fino a un certo punto. L'organizzazione ha investito risorse per rendere più facile seguire una solida pratica analitica. Come nel caso dei valori p, il problema sorge quando si perde il significato del rituale analitico. Un esempio in particolare mi è rimasto impresso nella mente.
Ho visto un'organizzazione che ha convalidato le modifiche al proprio processo sulla base di un modello di foglio di calcolo. Il modello aveva una scatola colorata e un grafico a scatola e baffi. Se la casella era verde, la modifica era considerata accettabile. Quando ho visto questo modello, ho chiesto all'azienda quando era accettabile utilizzare il modello e quando no. Non potevano darmi una risposta diversa da quella che era lo strumento utilizzato per convalidare tutte le modifiche al processo. Il rituale aveva perso il suo significato. Scavando più a fondo (e decodificando il modello), sono stato in grado di determinare che l'analisi era una semplice ANOVA, che viene fornita con un certo insieme di presupposti e condizioni in cui può essere utilizzata. Qualcuno in passato aveva sviluppato il modello per standardizzare un tipo specifico di analisi e, a causa della perdita del significato del rituale analitico, veniva usato selvaggiamente in modo improprio.
La metodologia di risoluzione dei problemi
Procederò con leggerezza qui, ma questa prossima area di rituali analitici potrebbe far storcere il naso a qualche naso. Ci sono molti rituali analitici che vengono confezionati in "Metodologie di risoluzione dei problemi" o "Metodi di miglioramento continuo". Non farò nomi: probabilmente puoi pensare a due o tre da solo a seconda del tuo settore. Sia chiaro: non c'è niente di sbagliato in queste metodologie o nei rituali analitici che insegnano. Sono buoni punti di partenza per aiutare le persone nei loro viaggi analitici.
Il problema nasce quando gli aderenti a queste metodologie non hanno il significato sottostante per i rituali analitici, che è qualcosa che vedo un po' più spesso di quanto vorrei. Ciò può essere causato da molte cose: perché l'aderente ha dimenticato, perché non è stato adeguatamente istruito o anche perché l'istruttore è stato ostacolato da vincoli organizzativi. In ogni caso, il risultato è lo stesso: i sistemi di rituali analitici privi del significato sottostante sono ricette per il disastro. Conducono a un'applicazione inappropriata degli strumenti oa un'errata interpretazione dei risultati. Questi, a loro volta, possono portare a sfiducia nell'analisi statistica in generale, che è una cosa difficile da risolvere.
La soluzione
Quindi, cosa si deve fare con i rituali analitici vuoti? In teoria, la soluzione è semplice: infondere nuovamente il significato nel rituale; ricordare a noi stessi perché stiamo facendo una particolare analisi. In pratica, potrebbe essere un compito arduo. Le persone che mettono in dubbio qualsiasi rituale incontrano resistenza. Per qualche ragione, i rituali analitici tendono a colpire un nervo scoperto per alcuni e sono particolarmente difficili da affrontare. Non so perché, anche se ho le mie teorie. La verità è che senza un costante rafforzamento dei concetti, qualsiasi rituale analitico può alla fine perdere il suo significato. Come con Ozymandias di Shelley , il tempo vincerà sempre se non siamo vigili. E questo mi porta al punto di questo piccolo flusso di pensiero: l'unico vero modo per riparare un vuoto rituale analitico è aggiustarlo per noi stessi.
Una risoluzione per il nuovo anno
In molte culture, il nuovo anno è un momento di buoni propositi. È il momento di guardare alle nostre debolezze e decidere di migliorare – non essere perfetti, solo migliori di quanto eravamo l'anno scorso. Quindi, ecco la mia proposta – una sfida o una chiamata alle armi, se vuoi: esamina i tuoi rituali analitici. Trovane uno su cui pensi di essere un po' debole e migliora la comprensione.
Ci sono alcune eccellenti risorse gratuite disponibili da JMP per aiutarti. Il primo è un sito Web che forniamo che contiene informazioni su argomenti statistici comuni. Si chiama il Portale della conoscenza statistica , ed è aggiornato abbastanza regolarmente con nuovi contenuti. L'altro è un corso completo di studi in statistica fornito da JMP e SAS Education chiamato Pensiero statistico per la risoluzione dei problemi industriali (se questo è un po 'un boccone per te, lo chiamiamo semplicemente STIPS). C'è anche la bacheca sul Comunità di utenti JMP . Infine, se hai bisogno di aiuto per iniziare, contattaci. Non so tutto (chiedi a mia moglie), ma conosco molte persone che sono molto più intelligenti di me e amano aiutare. Ti indicheremo nella giusta direzione.
Grazie per aver seguito questo piccolo articolo (pezzo di vanità, forse?). Onestamente l'ho scritto solo in modo che quella voce polverosa e più vecchia se ne andasse abbastanza a lungo da permettermi di lavorare su qualche altra scrittura (una delle mie risoluzioni).
Mi piacciono il cacao e la contemplazione, però...
Buon Anno! Buona fortuna e successo con tutte le tue risoluzioni, analitiche o meno.
L'altro problema in cui ci siamo sempre imbattuti nei rituali analitici è l'IMO, quei rituali tendono a funzionare meglio quando "tutto va come previsto". Nella mia carriera industriale è stato il raro evento empirico che è andato come previsto. Alcuni rapidi esempi:
1. L'esperimento non è stato condotto in ordine casuale... ma nell'ordine in cui era più facile per i tecnici eseguirlo.
2. Abbiamo dovuto utilizzare le materie prime del fornitore X, che non abbiamo scoperto fino a quando non siamo entrati nell'inventario dei materiali di laboratorio... non abbiamo mai usato la roba di quel fornitore prima per qualcosa di simile.
3. Abbiamo dovuto ricalibrare il sistema di misurazione a metà dell'analisi delle risposte.
4. I tecnici decidono che i livelli per certi fattori sono 'sciocchezze'..."non hanno mai funzionato a questi livelli prima. Useremo solo quello che hanno usato in passato. Saranno così contenti che abbiamo colto il loro errore".
E il nonno di tutti loro...5. Errore tipografico durante l'inserimento dei valori di risposta nella tabella dati JMP o nel foglio di lavoro Excel.
Quando sono successe queste cose, è stato un team adattabile, flessibile e curioso che ha incorporato questi problemi e il loro possibile impatto nel flusso di lavoro analitico.
