検証がDOEに含まれていないのはなぜですか？みなさん、こんにちは。私は今オンラインコースを学んでいます。 予測モデリングの部分では、検証を使用して、新しいデータに対するモデルのパフォーマンスを評価し、過剰適合モデルの選択を防ぎます。
検証には追加のデータが必要です。 ただし、DOEの部分では、この追加データは含まれていません。 収集されたすべてのデータは、モデルのトレーニングに使用されます。 中心点でさえ、モデルの2次効果を評価するために使用されます。
例として応答曲面DOEを取り上げます。 このDOEの目標は、最適なポイントを見つけることです。これは通常、「新しいデータ」です（DOEのポイントと比較して）。 この場合、検証セットが含まれていないのはなぜですか？ それは重要ではありませんか？
分析DOERe：検証がDOEに含まれていないのはなぜですか？モデルの検証は重要なステップです。 選択したモデルを使用して、関心のある因子レベルを見つけ（たとえば、望ましい応答と望ましくない応答を与えると予測される）、いくつかの実行（5-6）を設定し、新しい実行の平均応答を予測されたものと比較します平均応答。 違いのテストではなく、同等のテストを使用することをお勧めします。
モデル項の推定を改善したい場合は、それ自体で検証されたこのデータを元の実験と組み合わせることができます。
Re：検証がDOEに含まれていないのはなぜですか？に少し追加するには@markbailey私が同意するのアドバイス...問題解決方法としての哲学的にDOEは、基本原則として知識収集の効率を持っています。 1980年代の私のDOEインストラクターの1人は、リソースの最小支出のために必要な情報を取得したいという願望として「DOEの効率」を定義しました。 今日では、モデル駆動型の最適なDOE戦術では、モデルは「必要な情報」であると言えます。 そのため、最適なDOE法はその効率を実現し、すべての治療の組み合わせを必要とします。 追加の実行は必要ありません。
しかし、マークが示唆しているように、そしてすべての健全なDOE実践者が通常従うように、モデルを入手したら、モデルが実際に目前の問題に役立つことを確認するために追加の実行を行います。 したがって、DOEプロセスには、必要なステップとして検証（確認または検証と呼ばれることもあります）が含まれています...最初の実験の後、別の時間に発生します。
Re：検証がDOEに含まれていないのはなぜですか？マークとピートのコメントの両方に同意します...実験の結果と分析の結果として作成されたモデル（これを行うために使用する統計または実際の判断）は、実験の推論空間の関数です。 実験が将来の条件を表していない場合、モデルは、分析において「統計的に有意」であることを知っていても、有用な再現可能な結果を生成しません。
「残念ながら、将来の実験（将来の試験、明日の生産）は、この実験に影響を与えるものとは異なる環境条件（温度、材料、人）の影響を受けます…それは主題の知識によってのみです、おそらくさらなる実験によって助けられた（斜体を追加）より広い範囲の条件をカバーするために、間違ったリスクを伴いながら、将来の環境条件が現在の環境条件と十分に近く、結果を手に入れることができるかどうかを判断することができます。」
デミング博士
Re：検証がDOEに含まれていないのはなぜですか？たぶん、「検証」によって誰もが何を意味するのかを検証することが重要です。
一般に、アドホックデータのモデリングでは、ホールドアウトデータセットを使用してモデルを検証することは非常に良い考えです。 ホールドアウトデータの適合統計は、トレーニングデータからモデルの品質を評価するために使用されます。 アドホックデータのモデリングでは、基礎となる母集団に関する推定値を作成しようとしています。小さなデータセットを使用すると、モデルをトレーニングおよび評価する機能が損なわれます。 モデル化するシステムに関する観測数を最大化することは、より良い推定のために重要です。
DOEのデータは、分析前に非常に慎重に計画および収集されます。 この設計は、評価されるまでモデルに含めることができる用語がわからない場合があるモデリングの偶然データとは対照的に、事前に指定されたモデル用語の包含/使用をサポートします。
DOEの場合、設計によりモデル係数を推定するためにすべてのデータが必要であるため、モデル検証のためにデータが保持されることはありません。 DOEの主な目標は、物理現象をモデル化するために必要な最小限のデータを生成することです。 DOEの場合の「検証」という用語は、実験の完了後に追加の実行が完了することを意味します。 「検証」の実行は、DOEモデルの予測の品質を評価するために、予測値と比較されます。 多くの場合、検証の実行回数は少なく、おそらく1〜3回です。 これらの実行は、同じ入力設定で多くの実行/観測を生成する物理システムへの変更をサポートする証拠を提供します。 このモデルは、将来、物理システム/プロセスを調整するために使用されます。
DOE Worldは、Modeling Worldと同様の方法を使用しますが、アプローチは大きく異なります。
Re：検証がDOEに含まれていないのはなぜですか？バイロンをよく入れてください。 あなたがうまくやったように、私は検証を区別することを怠りました。
