纽约萨拉托加斯普林斯正进入深冬。 每年的这个时候,我都会端着热可可坐下来,看着外面的雪,然后思考。 对于许多文化而言,新年是一个沉思的时刻——一个评估我们的缺点、下定决心改进或改变的时刻。 说我一年中的这个时候很内省是委婉的说法。 我不知道冬天是怎么回事,但它让我陷入了一种深深的沉思状态。 每年的这个时候,我都会有很多关于项目和写作的想法。 这个小小的沉思整个周末都在具体化——我脑子里有一个尘土飞扬的老声音,就像让·谢泼德回忆他在克利夫兰街的时光,除了我在谈论数据、分析和蒙古火锅……
蒙古火锅
在 1 月的第一周,我正在纽约市与 NY JMP 团队的其他成员一起参加计划会议。 我们决定围绕去唐人街的一家蒙古火锅店进行一次小型团队建设活动。 这是一张照片:
Your New York JMP Account Team: (from right to left) Brendan Leary, Tracey Bailey, & Mike AndersonYour New York JMP Account Team: (from right to left) Brendan Leary, Tracey Bailey, & Mike AndersonYour New York JMP Account Team: (from right to left) Brendan Leary, Tracey Bailey, & Mike AndersonYour New York JMP Account Team: (from right to left) Brendan Leary, Tracey Bailey, & Mike Anderson您的纽约 JMP 客户团队:(从右到左)Brendan Leary、Tracey Bailey 和 Mike Anderson
现在,在您认为这是旅行日志之前,请稍等片刻。 我确实有一点。 首先,这家餐厅很棒——如果您在该地区,就应该去。 只是谷歌它。 其次,在用餐期间,我们正在讨论他们如何提供如何“做”蒙古火锅的说明——将不同的东西加入汤中煮的顺序以及它们应该在肉汤中停留多长时间。
The heavenly elixir that is Mongolian Hot Pot. The stuff on the right is super spicy, the stuff on the left, not so much.The heavenly elixir that is Mongolian Hot Pot. The stuff on the right is super spicy, the stuff on the left, not so much.The heavenly elixir that is Mongolian Hot Pot. The stuff on the right is super spicy, the stuff on the left, not so much.The heavenly elixir that is Mongolian Hot Pot. The stuff on the right is super spicy, the stuff on the left, not so much.蒙古火锅就是神药。 右边的东西超级辣,左边的东西不那么辣。
这让我开始思考,有多少我最喜欢的美食体验都有仪式感。 火锅、埃塞俄比亚、寿司、感恩节晚餐,甚至在周五晚上为我的家人做披萨——我们习惯于围绕消费食物创造仪式。 它们赋予体验更多的意义和重要性。 食物仪式可以将人们聚集在一起并巩固关系。 而且,在我目前的沉思状态下,它让我的车轮转动起来。
分析仪式
现在,这与 JMP 或一般分析有什么关系? 好吧,那天晚上晚些时候我在想仪式是如何在人类经历的其他部分出现的——我在这里不一定要谈论宗教仪式。 多年来,我见过许多分析已变得仪式化的案例。 事实证明,这可能是个大问题。
仪式都有一个共同的属性。 他们的目标是通过行动来教导或提醒。 他们通常也有某种框架(文化、社会等)来强化仪式的意义。 分析仪式以类似的方式开始——试图将最佳实践或对某人行之有效的事情编纂成法典,以免被遗忘。 这些分析仪式有很多名称——程序、SOP、宏、模板、成功案例等。说实话,这很好,而且可能是件好事。 分析实践的仪式化与任何仪式一样。 它增加了实践的意义。 通过仪式化分析,我们提升了它在组织中的重要性——尤其是当领导层采用或认可这些仪式时。 通常情况下,分析仪式通常会成为组织文化的一部分——嵌入其 DNA 中。 这就是问题的开始——你最后一次认真思考你的 DNA 是什么时候?
分析仪式的问题
分析仪式带来的问题是,它们和所有仪式一样,可以随着时间的推移从有意识的遵守死记硬背遵守,也就是走走过场。 当这种情况发生时,它们就失去了意义。 这对于分析仪式来说特别容易,因为它们不一定具有文化或社会支持结构来将意义与行动联系起来。 就我们今天看到的组织规模而言,分析是相当新的,并不总是具有与其他科学一样的固有部落知识或谨慎。 这是一个问题。
对于分析仪式来说,意义的丧失尤其危险。 由于含义包含分析的原因、所做的假设以及适当的用例——为什么仪式的意义——意义的丧失可能导致分析的误用。 最终,剥夺其意义的分析仪式是死的和危险的。 在我的职业生涯中,我见过很多案例,很明显,有价值的分析仪式已经失去了意义,而奉献者只是在走过场——而且可能不是正确的动作。 让我举几个例子。
P值之战
不久前,我正在阅读一篇文章,内容涉及一些科学期刊如何开始不鼓励报告 p 值或 p < 0.05 的显着性标准。 争论是人们盲目地使用标准,或者在某些情况下调整结果,以便他们可以报告相对于 p 值的有利结果。 实际情况要复杂一些。
在过去的某个时候,研究人员接受了统计学方面的教育,并开始报告 p 值,将其作为发现的重要性或数据趋势强度的便捷简写。 期刊将这种做法纳入分析仪式,以 p < 0.05 作为显着性基准。 这是一件好事——p 值是报告值的一个很好的指标,前提是上下文与选择特定 p 值标准的原因一起得到维护。 此外,用于假设检验的 p < 0.05 的限幅水平被广泛使用,并且通常对于许多应用来说已经足够好了——前提是从业者明白这是一个必须批判性地解释的指导方针,而不是死记硬背。
当仪式的意义及其背景丢失时,问题就来了。 空洞的仪式会导致错误的道路——正如在这些 p 值指南已经变成 p 值规则的学科中所看到的那样。 p 值规则反过来促进或促成不良行为。
变化点工作表的案例
说到糟糕的道路,让我们来谈谈古老的(或者声名狼藉,如果你愿意的话)分析模板。 许多组织为了简化其技术人员的工作或弥补机构知识的差距,在电子表格中开发分析模板或在在线分析中心开发标准分析。 有人可能会争辩说,这种分析的编纂是一件好事,我同意这一点。 该组织已将资源投入到更容易遵循合理的分析实践上。 与 p 值的问题一样,当分析仪式的意义丢失时,问题就来了。 有一个例子特别突出在我的脑海中。
我看到一个组织根据电子表格模板验证其流程的更改。 该模板有一个彩色框和一个盒须图。 如果框是绿色的,则更改被认为是可以接受的。 当我看到这个模板时,我问公司什么时候可以使用这个模板,什么时候不能。 除了用于验证所有流程更改的工具外,他们无法给我答案。 仪式已经失去了意义。 深入挖掘(并对模板进行逆向工程),我能够确定该分析是一个简单的方差分析——它带有一组可以使用它的特定假设和条件。 过去有人开发了模板来标准化一种特定类型的分析,但由于失去了分析仪式的意义,它被广泛滥用。
问题解决方法论
我要在这里小心行事,但分析仪式的下一个领域可能会调整一些鼻子。 “问题解决方法论”或“持续改进方法”中包含许多分析仪式。我不会说出名字——您可能会根据自己的行业自行想到两三个。 让我明确一点:这些方法论或它们所教授的分析仪式没有任何问题。 它们是帮助人们完成分析之旅的良好起点。
当这些方法论的拥护者没有分析仪式的潜在含义时,问题就来了,这是我经常看到的东西,而不是我想要的。 这可能是由多种原因引起的——因为追随者忘记了,因为他们没有得到适当的指导,甚至因为指导者受到组织限制的阻碍。 无论如何,结果都是一样的:缺乏潜在意义的分析仪式系统是导致灾难的良方。 它们会导致工具的不当应用或对结果的误解。 这些反过来又会导致对统计分析的普遍不信任,这是一个很难解决的问题。
解决方案
那么,对于空洞的分析仪式该怎么办呢? 从理论上讲,解决办法很简单:将意义重新灌输到仪式中;提醒自己为什么要进行特定分析。 实际上,这可能是一项艰巨的任务。 质疑任何仪式的人都会遭到抵制。 出于某种原因,分析仪式往往会触动某些人的神经,并且特别难以解决。 我不知道为什么,虽然我有我的理论。 事实上,如果不不断强化概念,任何分析仪式最终都会失去意义。 喜欢与雪莱的奥兹曼迪亚斯,如果我们不提高警惕,时间总会赢。 而且,这让我想到了这个小思想流的要点:修复空洞的分析仪式的唯一真正方法是为我们自己修复它。
新年决心
在许多文化中,新年是下决心的时候。 现在是审视我们的弱点并下定决心改进的时候了——不是完美,只是比去年更好。 所以,这是我的建议——如果你愿意,可以挑战或号召:检查你的分析仪式。 找到一个你认为自己可能有点薄弱的地方,并更好地理解它。
JMP 提供了一些优秀的免费资源来提供帮助。 第一个是我们提供的网站,其中包含有关常见统计主题的信息。 它被称为统计知识门户,并且会定期更新新内容。 另一个是完整的统计学课程,由JMP SAS Education 称为解决工业问题的统计思维(如果这对您来说有点麻烦,我们就称之为 STIPS)。 留言板上也有JMP 用户社区. 最后,如果您需要入门帮助,请联系我们。 我不是什么都知道(问我妻子),但我认识很多比我聪明得多的人,他们乐于助人。 我们会为您指出正确的方向。
感谢您坚持阅读这篇小文章(也许是虚荣心?)。 老实说,我把它写下来只是为了让尘土飞扬的老声音消失足够长的时间,让我可以从事其他写作(我的一项决议)。
不过,我确实喜欢可可和沉思……
新年快乐! 祝你所有的决议——分析的或其他的——好运和成功。

关于分析仪式,我们经常遇到的另一个问题是 IMO,当“一切按计划进行”时,这些仪式往往最有效。 在我的工业生涯中,这是罕见的按计划进行的经验事件。 几个简单的例子:
1. 实验不是按随机顺序进行的……而是技术人员最容易运行的顺序。
2. 我们不得不使用来自供应商 X 的原材料,直到我们进入实验室材料库存时我们才发现……我们以前从未使用过该供应商的材料来做这样的事情。
3. 我们必须在对响应进行中期分析时重新校准测量系统。
4. 技术人员认为某些因素的水平是“无稽之谈”……“他们以前从未在这些水平上运行过。 我们将只使用他们过去使用过的东西。 他们会很高兴我们发现了他们的错误。”
而他们的祖父……5。 在 JMP 数据表或 Excel 工作表中输入响应值时出现印刷错误。
当这些事情发生时,是一个适应性强、灵活、好奇的团队将这些问题及其可能的影响纳入分析工作流程。
优秀的文章——作为个人,我们很容易进行例行分析并将它们变成一个脚本,该脚本将进行所有处理,但没有提出我们在创建它们时每一步所做的问题。
我正在考虑我职业生涯早期的一份工作,我在那里制作了一个双变量“控制图”(即使在 JMP 的早期版本中也具有惊人的功能!),它由两种材料的配对测试结果组成。您可以通过观察随时间推移的配对结果来了解随机和系统变化……只要满足基本假设即可。 您可以想象这是怎么回事……随着程序从研发到工程再到制造,死记硬背的步骤得以保留,但核心假设丢失了——结果一切都出错了!
强烈提醒要始终保持分析活跃!