紐約薩拉託加斯普林斯正進入深冬。 每年的這個時候,我都會端著熱可可坐下來,看著外面的雪,然後思考。 對於許多文化而言,新年是一個沉思的時刻——一個評估我們的缺點、下定決心改進或改變的時刻。 說我一年中的這個時候很內省是委婉的說法。 我不知道冬天是怎麼回事,但它讓我陷入了一種深深的沉思狀態。 每年的這個時候,我都會有很多關於項目和寫作的想法。 這個小小的沉思整個週末都在具體化——我腦子裡有一個塵土飛揚的老聲音,就像讓·謝潑德回憶他在克利夫蘭街的時光,除了我在談論數據、分析和蒙古火鍋……
蒙古火鍋
在 1 月的第一周,我正在紐約市與 NY JMP 團隊的其他成員一起參加計劃會議。 我們決定圍繞去唐人街的一家蒙古火鍋店進行一次小型團隊建設活動。 這是一張照片:
Your New York JMP Account Team: (from right to left) Brendan Leary, Tracey Bailey, & Mike AndersonYour New York JMP Account Team: (from right to left) Brendan Leary, Tracey Bailey, & Mike AndersonYour New York JMP Account Team: (from right to left) Brendan Leary, Tracey Bailey, & Mike AndersonYour New York JMP Account Team: (from right to left) Brendan Leary, Tracey Bailey, & Mike Anderson您的紐約 JMP 客戶團隊:(從右到左)Brendan Leary、Tracey Bailey 和 Mike Anderson
現在,在您認為這是旅行日誌之前,請稍等片刻。 我確實有一點。 首先,這家餐廳很棒——如果您在該地區,就應該去。 只是谷歌它。 其次,在用餐期間,我們正在討論他們如何提供如何“做”蒙古火鍋的說明——將不同的東西加入湯中煮的順序以及它們應該在肉湯中停留多長時間。
The heavenly elixir that is Mongolian Hot Pot. The stuff on the right is super spicy, the stuff on the left, not so much.The heavenly elixir that is Mongolian Hot Pot. The stuff on the right is super spicy, the stuff on the left, not so much.The heavenly elixir that is Mongolian Hot Pot. The stuff on the right is super spicy, the stuff on the left, not so much.The heavenly elixir that is Mongolian Hot Pot. The stuff on the right is super spicy, the stuff on the left, not so much.蒙古火鍋就是神藥。 右邊的東西超級辣,左邊的東西不那麼辣。
這讓我開始思考,有多少我最喜歡的美食體驗都有儀式感。 火鍋、埃塞俄比亞、壽司、感恩節晚餐,甚至在周五晚上為我的家人做披薩——我們習慣於圍繞消費食物創造儀式。 它們賦予體驗更多的意義和重要性。 食物儀式可以將人們聚集在一起並鞏固關係。 而且,在我目前的沉思狀態下,它讓我的車輪轉動起來。
分析儀式
現在,這與 JMP 或一般分析有什麼關係? 好吧,那天晚上晚些時候我在想儀式是如何在人類經歷的其他部分出現的——我在這裡不一定要談論宗教儀式。 多年來,我見過許多分析已變得儀式化的案例。 事實證明,這可能是個大問題。
儀式都有一個共同的屬性。 他們的目標是通過行動來教導或提醒。 他們通常也有某種框架(文化、社會等)來強化儀式的意義。 分析儀式以類似的方式開始——試圖將最佳實踐或對某人行之有效的事情編纂成法典,以免被遺忘。 這些分析儀式有很多名稱——程序、SOP、宏、模板、成功案例等。說實話,這很好,而且可能是件好事。 分析實踐的儀式化與任何儀式一樣。 它增加了實踐的意義。 通過儀式化分析,我們提升了它在組織中的重要性——尤其是當領導層採用或認可這些儀式時。 通常情況下,分析儀式通常會成為組織文化的一部分——嵌入其 DNA 中。 這就是問題的開始——你最後一次認真思考你的 DNA 是什麼時候?
分析儀式的問題
分析儀式帶來的問題是,它們和所有儀式一樣,可以隨著時間的推移從有意識的遵守死記硬背遵守,也就是走走過場。 當這種情況發生時,它們就失去了意義。 這對於分析儀式來說特別容易,因為它們不一定具有文化或社會支持結構來將意義與行動聯繫起來。 就我們今天看到的組織規模而言,分析是相當新的,並不總是具有與其他科學一樣的固有部落知識或謹慎。 這是一個問題。
對於分析儀式來說,意義的喪失尤其危險。 由於含義包含分析的原因、所做的假設以及適當的用例——為什麼儀式的意義——意義的喪失可能導致分析的誤用。 最終,剝奪其意義的分析儀式是死的和危險的。 在我的職業生涯中,我見過很多案例,很明顯,有價值的分析儀式已經失去了意義,而奉獻者只是在走過場——而且可能不是正確的動作。 讓我舉幾個例子。
P值之戰
不久前,我正在閱讀一篇文章,內容涉及一些科學期刊如何開始不鼓勵報告 p 值或 p < 0.05 的顯著性標準。 爭論是人們盲目地使用標準,或者在某些情況下調整結果,以便他們可以報告相對於 p 值的有利結果。 實際情況要復雜一些。
在過去的某個時候,研究人員接受了統計學方面的教育,並開始報告 p 值,將其作為發現的重要性或數據趨勢強度的便捷簡寫。 期刊將這種做法納入分析程序,以 p < 0.05 作為顯著性基準。 這是一件好事——p 值是報告值的一個很好的指標,前提是上下文與選擇特定 p 值標準的原因一起得到維護。 此外,用於假設檢驗的 p < 0.05 的限幅水平被廣泛使用,並且通常對於許多應用來說已經足夠好了——前提是從業者明白這是一個必須批判性地解釋的指導方針,而不是死記硬背。
當儀式的意義及其背景丟失時,問題就來了。 空洞的儀式會導致錯誤的道路——正如在這些 p 值指南已經變成 p 值規則的學科中所看到的那樣。 p 值規則反過來促進或促成不良行為。
變化點工作表的案例
說到糟糕的道路,讓我們來談談古老的(或者聲名狼藉,如果你願意的話)分析模板。 許多組織為了簡化其技術人員的工作或彌補機構知識的差距,在電子表格中開發分析模板或在在線分析中心開發標準分析。 有人可能會爭辯說,這種分析的編纂是一件好事,我同意這一點。 該組織已將資源投入到更容易遵循合理的分析實踐上。 與 p 值的問題一樣,當分析儀式的意義丟失時,問題就來了。 有一個例子特別突出在我的腦海中。
我看到一個組織根據電子表格模板驗證其流程的更改。 該模板有一個彩色框和一個盒須圖。 如果框是綠色的,則認為更改是可以接受的。 當我看到這個模板時,我問公司什麼時候可以使用這個模板,什麼時候不能。 除了用於驗證所有流程更改的工具外,他們無法給我答案。 儀式已經失去了意義。 深入挖掘(並對模板進行逆向工程),我能夠確定該分析是一個簡單的方差分析——它帶有一組可以使用它的特定假設和條件。 過去有人開發了模板來標準化一種特定類型的分析,但由於失去了分析儀式的意義,它被廣氾濫用。
問題解決方法論
我要在這裡小心行事,但分析儀式的下一個領域可能會調整一些鼻子。 “問題解決方法論”或“持續改進方法”中包含許多分析儀式。我不會說出名字——您可能會根據自己的行業自行想到兩三個。 讓我明確一點:這些方法論或它們所教授的分析儀式沒有任何問題。 它們是幫助人們完成分析之旅的良好起點。
當這些方法論的擁護者沒有分析儀式的潛在含義時,問題就來了,這是我經常看到的東西,而不是我想要的。 這可能是由很多原因造成的——因為追隨者忘記了,因為他們沒有得到適當的指導,甚至因為指導者受到組織限制的阻礙。 無論如何,結果都是一樣的:缺乏潛在意義的分析儀式系統是導致災難的良方。 它們會導致工具的不當應用或對結果的誤解。 這些反過來又會導致對統計分析的普遍不信任,這是一個很難解決的問題。
解決方案
那麼,對於空洞的分析儀式該怎麼辦呢? 從理論上講,解決辦法很簡單:將意義重新灌輸到儀式中;提醒自己為什麼要進行特定分析。 實際上,這可能是一項艱鉅的任務。 質疑任何儀式的人都會遭到抵制。 出於某種原因,分析儀式往往會觸動某些人的神經,並且特別難以解決。 我不知道為什麼,雖然我有我的理論。 事實上,如果不不斷強化概念,任何分析儀式最終都會失去意義。 喜歡與雪萊的奧茲曼迪亞斯,如果我們不提高警惕,時間總會贏。 而且,這讓我想到了這個小思想流的要點:修復空洞的分析儀式的唯一真正方法是為我們自己修復它。
新年決心
在許多文化中,新年是下決心的時候。 現在是審視我們的弱點並下定決心改進的時候了——不是完美,只是比去年更好。 所以,這是我的建議——如果你願意,可以挑戰或號召:檢查你的分析儀式。 找到一個你認為自己可能有點薄弱的地方,並更好地理解它。
JMP 提供了一些優秀的免費資源來提供幫助。 第一個是我們提供的網站,其中包含有關常見統計主題的信息。 它被稱為統計知識門戶,並且會定期更新新內容。 另一個是完整的統計學課程,由JMP SAS Education 稱為解決工業問題的統計思維(如果這對您來說有點麻煩,我們就稱之為 STIPS)。 留言板上也有JMP 用戶社區. 最後,如果您需要入門幫助,請聯繫我們。 我不是什麼都知道(問我妻子),但我認識很多比我聰明得多的人,他們樂於助人。 我們會為您指出正確的方向。
感謝您堅持閱讀這篇小文章(也許是虛榮心?)。 老實說,我把它寫下來只是為了讓塵土飛揚的老聲音消失足夠長的時間,讓我可以從事其他寫作(我的一項決議)。
不過,我確實喜歡可可和沈思……
新年快樂! 祝你所有的決議——分析的或其他的——好運和成功。

關於分析儀式,我們經常遇到的另一個問題是 IMO,當“一切按計劃進行”時,這些儀式往往最有效。 在我的工業生涯中,這是罕見的按計劃進行的經驗事件。 幾個簡單的例子:
1. 實驗不是按隨機順序進行的……而是技術人員最容易運行的順序。
2. 我們不得不使用來自供應商 X 的原材料,直到我們進入實驗室材料庫存時我們才發現……我們以前從未使用過該供應商的材料來做這樣的事情。
3. 我們必須在對響應進行中期分析時重新校準測量系統。
4. 技術人員認為某些因素的水平是“無稽之談”……“他們以前從未在這些水平上運行過。 我們將只使用他們過去使用過的東西。 他們會很高興我們發現了他們的錯誤。”
而他們的祖父……5。 在 JMP 數據表或 Excel 工作表中輸入響應值時出現印刷錯誤。
當這些事情發生時,是一個適應性強、靈活、好奇的團隊將這些問題及其可能的影響納入分析工作流程。
優秀的文章——作為個人,我們很容易進行例行分析並將它們變成一個腳本,該腳本將進行所有處理,但沒有提出我們在創建它們時每一步所做的問題。
我正在考慮我職業生涯早期的一份工作,我在那裡製作了一個雙變量“控製圖”(即使在 JMP 的早期版本中也具有驚人的功能!),它由兩種材料的配對測試結果組成。您可以通過觀察隨時間推移的配對結果來了解隨機和系統變化……只要滿足基本假設即可。 您可以想像這是怎麼回事……隨著程序從研發到工程再到製造,死記硬背的步驟得以保留,但核心假設丟失了——結果一切都出錯了!
強烈提醒要始終保持分析活躍!