DOEの選択設計と強制ランキング:勝訴しながらも審査員の泣き言を防ぐドン・リフケ、サンディア国立研究所研究開発エンジニア
クレア・シロイド、薬剤師、臨床医、ウォルグリーン専門薬局
JMP の DOE 選択設計機能を、味など通常は名目上の特性しかない項目の嗜好を決定するための強制ランキング手法と比較します。機密性が高く過度に技術的になりがちな兵器プロジェクトのデータを使用する代わりに、ほとんどの人が理解できる主題であるワインから容易に入手できるデータを使用しました。この調査の目的は 2 つの評価手法を比較することであり、最も味の良いワインを決定することではありません。それでも、結果は将来のワイン購入に役立つヒントを提供しました。このトピックは、昨年の Discovery Summit で Doug Montgomery ( 実験の設計と分析の著者) が行った強制ランキングに関する質問にヒントを得ました。多数の項目をランキング (嗜好順に並べ替え) するのは難しい場合があります。一方、2 つの項目のどちらが優れているかを繰り返し決定する、一対比較を実行するのはかなり簡単です。18 人の熟練したワイン愛好家のパネルに、12 本のワインを強制的にランキング (1 から 12 の順位付け) するように指示しました。また、審査員にはワインをペアで比較する選択肢デザインも提示されました。各審査員は、提示された8組のワインの中から、どちらのワインがより美味しいかを判断するだけで済みました。この実験ではオレゴン産ピノ・ノワールが使用され、もちろんその中にはモンゴメリーの本の表紙にも掲載されているシェハレムワイナリーも含まれていました。結果は、DOE選択肢デザインと強制ランキングを比較した場合、驚くほど異なる結果を示しました。また、審査員は強制ランキングよりもDOE選択肢デザインを完了することを明確に好んでいたことも観察されました。(強制ランキングを完了しようとしている間、審査員は相当な不満を漏らしていました。)時間があれば、10段階評価の基本的な尺度を用いた過去の研究データも検討します。