こんにちは
みんな。
私は
キャロル
株式会社
私は a 統計学者 で 借金。
今日、 I 意思 話す について a プロジェクト 私は
で 作成 a 時間- 効率的 戦略 のために 選択する a テスト セット
で その 検証 の 一つの 画像 検出 アルゴリズム。
これ 仕事 だった 終わり で 科学者との協力
から その 全国 環境健康科学研究所
病理学者 から 実験的な 病理学研究室、
そして 私の 仲間 同僚 で 借金。
で 齧歯類 毒物学、 進歩 デジタルで 画像解析
オファー 機会 のために 定量的 組織病理学 評価。
アン 例 の どこ デジタル 画像 分析 できた なれ 役に立つ
評価は テスト 記事- 誘発された免疫毒性効果
で 齧歯類 脾臓。
通常、 病理学者 使用 a 顕微鏡
に 評価する かどうか そこには は 脾臓の免疫毒性
そして 作る 判断 の上 かどうか 脾臓 から 治療を受ける動物
は 違う から その コントロール グループ。
これ ワークフロー は うつ伏せ に インター そして 評価者内 変動性
で 特徴づける 違い 内で その 勉強
そして また 横切って 違う 研究。
こちらは 一つの 例 の a ズーム- で 断面 ビュー の a 齧歯類 脾臓。
ここ、 私は ただ ポインティング 外
特定の機能 の 興味 に 私たちの 協力者 それ 私たちは 欲しい に 捕獲。
私たちの 問題。
いつ 私たちは 得た 関与した で これ プロジェクト、
私たちの病理学者の協力者はすでに訓練を受けていました 一つの アルゴリズム
それ 測定 これら 特徴 の 興味。
その 質問 それ だった ポーズをとった に 私たち だった どうやって する 私たちは 検証する これ アルゴリズム？
検証 は a とても 広い 学期。
に 狭い 私たちの 集中、
私たちは 考え について 何 は いくつかの の その 主要 質問 それ 私たちは 望んでいた に 住所。
初め、 その アルゴリズム だった 選ばれた少数の人々によって訓練され、
それで 私たちは 望んでいた に 見る かどうか 異なる研究室の異なる病理学者
だろう 同意する と その アルゴリズム 出力。
2番、 そこには だった 複数 特徴
どこ その アルゴリズム だった 訓練を受けた に 測定。
私たちは 望んでいた に 見る もし そこには は 具体的な特徴
どこ パフォーマンス は より良い または 悪い。
それから、 私たちは また 望んでいた に 見る
このアルゴリズム できる 所有 上 に に対して a 広い 範囲 の ケース。
もし そこには は どれでも 盲目 斑点、 できる 私たちは 探す 彼ら？
病気 また 言及 それ から ここ 今後、
私はします 参照する に その 画像 アルゴリズム として その 人工知能。
1つ 解決 それ 私たちは 考え の 人間とAIの両方を持つことだった
注釈を付ける その 同じ 画像 そして 比較する その 出力。
これ は どうやって それ だろう 仕事。
A 組織 サンプル 取得する スキャンされた それで それ ターン の中へ a デジタル 画像
またはスライド全体 WSIのイメージ、
そして それ 画像 取得する 供給された の中へ その 人工知能 のために 処理。
それから のために 人間、 彼らは ビュー その 画像 使用して 一つの 画像ソフトウェア
どこ 彼らは できる 手動で 注釈を付ける 特徴 の 興味。
1つ の その 質問 私たちは 得た 尋ねられたのは どうやって 多くの 画像 する 私たちは 必要 に 検証しますか?
統計学者として、
私たちの 答え は いつも として 多くの として あなた できる または する あなた 持っている 何百？
あなたは 持っている 何千？
しかし 後 話している に 彼ら、
いくつかあることに気づく 運用 制約 に 埋め込む これ。
その 初め 制約 だった それ
そこには 必要 のために それぞれ 画像 に なれ 評価された による 三つ 違う 人々。
持つ 三つ 人々 だった 役に立つ
となることによって 私たちは できる また 見積もり その 変動性 間 評価者。
それ また ターン 外 それ これ プロセス の 注釈 は とても 時間- 消費する。
後 話している に その 病理学者、 その 最大 番号 の 画像
彼らは喜んで に 注釈を付ける だった について 24 あたり 人。
それから、 最後に、 1つ の その ゴール の このプロジェクト
は に 得る 買う- で または サポート から 病理学者 から 他の ラボ。
それ 意味 私たちは 必要 複数の研究室からの参加
そして 複数 人々 から それぞれ 研究室。
で これ 勉強、 私たちは 得た 3つのセンターからの参加
そして 私たちは 持っていた 三つ 病理学者 代表する それぞれ 中心。
で 合計、 私たちは 持っていた 九 病理学者 採用された で その 勉強。
ベース の上 全て の これら 制約、
私たちは 決定した それ 私たちは できる 検証する のみ 72 画像。
その サンプリング プラン。
今 私たちは 知る 私たちの サンプル サイズ。
どうやって する 私たちは 選択 その 72歳？
ランダム 選択 は わかった、 しかし できる 私たちは する より良い？
何 私たちは 来た 上 と だった
以来 その 料金 あたり 画像 のために その 人工知能 比較的低い、
私たちは 得た その 人工知能 に プロセス a 大きい セット の 画像
そしてそこから、
使用 情報 から その AI出力 に より良い 選択 私たちの 72 サンプル。
私たちは 使用 a 応答 サービス モデル に 選択 私たちの ポイント
RSMはポイントを選択する
に向かって その 境界 そして 中心 の その 入力 空間。
その a モデル 含む あなたの 主要 二- 方法 交流 効果 そして 二次関数 効果。
これ モデル だった 特に 役に立つ に 私たちの 検証 問題
なぜなら私たちは に 見て のために 地域 どこ 合意 失敗する 間 人間 そして 人工知能。
一般的に、 バグ 傾向がある に 起こる の上 その 境界 そして エッジ の これ 空間。
これ タイプ の モデル フィット その 問題 それ 私たちは 持っていた。
今、 私たちは 持っている a プラン に 選択 その 画像。
その 質問 今 は どうやって する 私たちは 割り当てる これら 72 画像 横切って 九 評価者ですか?
私たちは 期待する その サンプル に 持っている a 広い 範囲 の 複雑。
私たちは 望んでいた に 作る もちろん それ みんな 得た a バランスの取れた ミックス の スライド。
その 複雑 または これ 場合 ミックス
決定された による その 出力 それ 私たちは 得た から その 人工知能。
私たちは また 必要 に 制約を満たす
の 作る もちろん それ それぞれ 画像 は 見た による 三つ 違う 人々。
ここ は 私の ワークフロー。
I 意思 見せる あなた どうやって I 作成された その 満足のいくサンプリング計画
全て の 私たちの 運用 制約 JMP で。
I 持っている 三つ 手順 で これ ワークフロー。
初め、 私は 行く に 見せる あなた どうやって 私たちは 選択された その 72 画像
から a 大きい セット。
2番 は どうやって 私たちは 複製された その 72 画像 三つ 回、
だから私たちは 持っている 216 実行されます。
これをやる必要があった
それぞれの画像に なれ 見た による 三つ 評価者。
その 最後 ステップ、
病気 見せる あなた どうやって 216回の試行を9人の評価者に割り当てた。
それで それ それぞれ 人 もっている その通り 24 画像。
で それぞれ の これら 手順、 I 意思 実は なれ 使用して その DOE プラットフォーム。
今、 私は ただ 行く に 動く 以上 に ジャンプ。
I 持っている 私の ジャンプ ファイル で そこには。
私の JMPジャーナル。
I 午前 行く に 開ける a サンプル データ セット、
そして I 言う サンプル なぜなら 私たちの データ もっている ない された 出版された まだ。
のために その 目的 の これ デモンストレーション、 I 意思 なれ 使用して a 偽物 データ セット。
これ データ セット もっている その 同じ 特徴 に その オリジナル データ それ 私たちは 収集されました。
これ は 何 その データ 見た目 のように。
I 持っている 私の スライド ID、 どれの は ただ a 数値 変数 行く から 1 に 100。
行く から 1 に 100 右 ここ。
I 持っている 4つ 変数 それ 私は 見ている のために。
それは された 収集された による その 人工知能。
特徴 1、 2、 3、そして 4.
三つ の 彼ら は 連続 そして 1つ は アカウント 変数。
もし あなた 見て で 下 分析、 多変量 方法、多変量、
もし 私たちは ただ 見せる その 散布図 表示されるすべての変数のマトリックス、
全て の 彼ら は 相関関係はありません。
これ は その 広める の その 範囲 の 私たちの 変数。
ステップ 1つ。
下 DOE、 そこには a カスタム デザイン、それが私がクリックしているものです。
私たちは できる 離れる その 回答 Y ここ。 ただ 離れる それ 一人で。
その 要因 ここ、 そこには 実は 二 方法 に する これ。
1つ 方法 は に クリック の上 これ ボタン ここ それ 言う 追加 要素。
I 考える について 5番目 の その 方法 そして そこには a 共変量 選択。
もし あなた クリック それ、
それは 聞く あなた どれの 列 共変量の あなた 欲しい に 含む で その デザイン。
で 私の 場合、 その これら 4つ 特徴。
私は ただ 選択する 彼ら そして あなた クリック わかった。
ジャンプ 意思 自動的に 最小値と最大値を入力する
のために それぞれ の これら 変数。
あなたは 見る ここ それ 彼らは 全て 治療された として 共変量。
それ 見た目 良い。
病気 ただ 素早く 近い これ
そして それから 見せる あなた 別の 方法 の やっている その 同じ もの。
また、 で DOE カスタム デザイン。
何 I 示した あなた だった 追加する それ 使用して これ 方法 ここ。
別の 方法 に する それ は に ただ 使用 これ ボタン 右 ここ
共変量を選択 要因
そして それは 与える あなた その ちょうど 同じ もの。
また、 私は ピッキング その 要因 それ 私は 興味がある で
そして自動的に 人口が多い これ 要因 ウィンドウ。
私は ただ スクロール 下 に その 底 そして クリック 続く。
これ は どこ 私たちは できる 置く で その モデル それ 私たちは 欲しい。
のために 私たち、 私たちは 望んでいた 一つの RSM または 応答 サービス モデル。
そこには は また a ショートカット ボタン 右 ここ。
私は ただ 行く に クリック それ。
何 それ した は それ 追加した...
私たちは すでに 持っている 私たちの 主要 要因 で そこには、
しかし それ 追加した 私たちの 二次方程式 そして 二- 方法 交流 効果。
それから、 最後に、 で その 底に ここ どこ それ 言う 番号 の 実行、
私たちは しない 欲しい 100 なぜなら 私たちは 実は ただ 欲しい に 選択 72 外 の 100。
私は ただ 行く に 変化 これ に 72.
これ 全て 見た目 良い に 自分。
病気 クリック 作る デザイン。
さあ ただ 与える ジャンプ a 少し 秒 に 作成する その デザイン のために 私たち。
ここ 私たちは 行く。
これ は その デザイン それ それ 作成された のために 私たち。
として あなた できる 見る、 もし あなた スクロール 下、
それ のみ 与えた 私たち 72 行、 どれの は 何 私たちは 持っていた 尋ねた のために。
私は ただ 行く に 言う、 振り向く これ の中へ a データ テーブル。
私は ただ 行く に 打つ 作る テーブル 右 ここ の上 その 底 左。
私は 行く に 近い これ のために 今。
今、 前に I 見せる あなた 何 これ デザイン 見た目 のように、
I 実は 欲しい に 行く 戻る に その オリジナル テーブル、
ただ それで あなた できた 見る...
私たちは できる 比較する 何 選ばれた観測に何が起こったのか
対 観察 それ だった ない 選んだ。
もし あなた 行く 戻る に その オリジナル データ テーブル、 その もの それ だった 選ばれた、
それ 72 は 実は 強調表示されます。
何 私は のように に する で これ ポイント は 私は のように に 作成する a 新しい カラム
それ だろう 識別する どれの 行 だった 選択された そして どれの もの そうではなかった。
に する それ、 あなた 行く 下 行。
下 行 選択、
そこには は その 最後 オプション で ここ 言う 名前 選択 で カラム。
何 それは する それは ラベル その 現在選択されている行
そして 保存 何でも 価値観 あなた 割り当てる のために それ カラム。
私は 行く に クリック それ。
その カラム 名前。
Y または 得る に 作成する a その列の名前。
T 彼 行 それ は 強調表示、 私は 値 1 を割り当てます。
その もの それ だった ない 選択された、 I 欲しい に 与える 彼ら a 価値 の ゼロ。
私は 行く に Oを押す なぜなら、 そして それ 作成された これ カラム 右 ここ。
全て の 私の 望んでいる、 そこには 72...
そこには 72 行 のために その もの それ 選ばれた
そして それから 28 のために その もの それ だった ない 選択されました。
I 欲しい に 行く 戻る に 私の 散布図 マトリックス に 見る 回答
または に 見る どれの 観察 だった 選んだ そして どれの もの そうではなかった。
しかし 前に 私たちは する 色分けしたいのですが
それで それ いつ あなた 見て で その グラフ、
I できる すぐに スポット どれの もの だった 選んだ そして どれの もの そうではなかった。
簡単な 方法 の やっている それ は に する 行、 色 または マーク による カラム。
それから、 ここ、 I 欲しい に 使用 これ 「選択済み」という列
それで それ 全て その ゼロ 意思 なれ オレンジ色の円で識別される
そして 全て その もの 意思 なれ 特定された による a 青 丸。
私たちは 使用 a マーカー として 良い。
それ かもしれない 作る それ より簡単に に 識別する その 観察。
病気 ただ Oをクリック なぜなら。
今、 全て の 私の 行 は マークされた による その プラス または その 円。
もし私が...に戻ったら
もし I 行く 戻る に 私の 散布図 マトリックス、
また、 その 下 多変量 方法、 多変量、 そして I ただ 打つ 想起。
私は やっている その 同じ もの として I した 当初は。
させて 自分 [OK]をクリックします。
私は ただ 行く に 作る これ a 少し 少し もっと大きい。
あなたは 今 見る それ その 青 プラス は その 観察 それ だった 選択された、
そして オレンジ 円 は その もの それ そうではなかった。
その もの それ だった 選択された
傾向がある 起こる もっと の上 その 境界 そして エッジ の 私たちの 空間。
これ は その通り 何 私たちは 欲しかった。
これ 見た目 素晴らしい に 自分。
これを閉じましょう。
ただ に 納得させる あなた自身
それ その モデル は やっている 何 その 想定 に なれ やっている、
I 実は した これ 同じ 設定、
しかし これ 時間、 その代わり の ピッキング 72, 私は のみ ピッキング 24.
さあ 作る それ a 少し 少し もっと 過激。
ただ に 見せる あなた 一つの 例 の 何 それ 見た目 のように。
また、 今 私の 選択。
今、 そこには のみ 24 行 それ は 選択された で ここ。
さあ する その 同じ もの。
作る これ a 少し 少し もっと大きい。
今、 あなた 見る 少ない 青 プラス なぜなら そこには すべき のみ なれ 24.
しかし それから あなたは 見る どうやって それらの 観察が選ばれている
対 その もの それ だった ない 選んだ。
彼らは する 傾向がある に 起こる もっと の上 外側の境界、
しかし まだ いくつかの で その 中心。
さあ 行く 戻る に 私たちの オリジナル 問題。 良い ただ 近い これ。
これ だった 私たちの オリジナル データ テーブル。
によって作成されたもの その デザイン は これ 1つ。
何 する 私たちは 持っている ここ？
だった まだ 維持 その 同じ 変数 それ 私たちは 尋ねた JMPへ 含む。
私たちは 持っている 私たちの 特徴 1 2、 3、そして 4.
なぜ 私たちの 応答 は まだ ない？
私たちは 今 持っている これ 新しい カラム それ 言う 共変量 行 索引。
基本的に、 これ ただ リンク あなた 戻る に あなたの オリジナル テーブル。
もし これ 言う 88, それ だろう なれ 行 88 の上 あなたの オリジナル テーブル それ 得た 捕らえられた。
これ 1つ。
これ 行 ここ すべき なれ その 同じ として これ 行 右 ここ。
前に 私たちは 動く、 私は 実は ただ 行く に 名前を変更する これ に 私の スライド ID。
で 私の 場合、 その スライド ID、 どれの は ただ a 番号 から 1 に 100,
その 実は ただ その 同じ として その 共変量行 索引。
それ だった 全て のために ステップ 1つ。
ステップ 二 は 今 複製する その 72 画像。
どうやって する 私たちは する それ？
A 素早い 方法 の やっている それ は に 行く に DOE。
その 2番 選択 は 増強 デザイン。
それから これ ウィンドウ 意思 ポップ 上 尋ねる あなた 何 は あなたの 回答 そして 要因ですか?
I 知る なぜ 私たちは しない 本当に 反応がある、
しかし I 考える あなた まだ 必要 に 置く で 何か で ここ。
それは わかった。
あなた ただ 置く それ で そこには 平 けれど その 全て ない 価値観。
それから、 のために その 要因、 だった 行く に 選択 私たちの 特徴 1 に 4.
これ 時間、 私たちは だろう また 必要 に 選択 私たちの スライド ID。
クリック わかった。
これ 新しい ウィンドウ ポップス 上 と 全て の 私たちの 要因 .
繰り返しますが、JMP 自動 人口 その 範囲 の 全て の 私たちの 変数。
の上 その 底 ここ、 下 拡張 選択肢、
そこには a 複製する ボタン、 そして それは その通り 何 私たちは 必要。
クリック それ そして それから 彼らは 聞く あなた、
どうやって 多くの 番号 の 回 する あなた 欲しい に 実行する それぞれ 走る？
その デフォルト は 二、 しかし 私たちは 実は 欲しい それ に なれ 三つ
なぜなら 私たちは 必要 それぞれ 画像 に 見せる 上 三つ 回 で 私たちの デザイン。
それから 私たちは クリック わかった。
今、 何 あなたは 見る は それ で 私たちのデザイン、
その代わり の ただ 72, 私たちは 今 持っている 72 回 三つ。
良い ただ スクロール 全て その 方法 に その 底。
私たちは 今 持っている 216 行。
病気 ただ クリック 作る テーブル に 振り向く それ の中へ a データ テーブル。
良い 近い これ。
A 少し もっと もの それ I 欲しい に チェック。
A カップル もっと もの I 欲しい に チェック 前に 私たちは 動く の上 に ステップ 三つ。
それ は、 毎 時間 あなたは やっている これら 手順、
あなた 欲しい に 作る もちろん それ その 実は やっている 何 あなた 考える それ すべき なれ やっている。
で これ 場合、
I 望んでいた に チェック それ それぞれ スライド ID 実は 発生する 三つ 回。
だった 行く に 使用 表にする に する それ。
表計算、S 苦しむ ID、 そして I すべき 持っている a カウント の 三つ のために それぞれ ID。
それは 何 私たちは 持っている。
それ 見た目 素晴らしい。
それは それ のために ステップ 二。
さあ 動く の上 に その 最後 ステップ、 どれの は その ほとんど エキサイティング ステップ。
今、 私たちは 持っている 216 行 そして 私たちは 持っている その スライド ID。
今、 私たちは 欲しい に 配布する これ に 九 違う 人々。
どうやって だろう 私たちは する それ で a 方法 それ それぞれ 人 取得する a バランスの取れた ミックス？
A いいね 方法 に する それ は 使用する DOE また。
DOE、クリック の上 DOEカスタム デザイン。
のように 何 私たちは した 前に、
だった まだ 行く に 使用 私たちの 共変量 として 要因。
ただ 選択 特徴 1 に 4 そして 私たちの スライド ID。
ジャンプ 意思 自動 人口を増やす その 分 そして 最大。
今、 全て の その 行 ここ は 彼らは 全て リストされている として 共変量。
しかし で これ ポイント、 I 実は 欲しい に 追加 二 もっと 要因。
1つ 要素 は a カテゴリカル 3つのレベルを持つ因子、
そして それ は その 中心 または その 研究室 なぜならあなたは 持っている 九 病理学者、
しかし 彼らは 全て 来る から 三つ 違う センター。
私は ただ 行く に 名前を変更する 彼ら あ、 B そして C.
それから I 欲しい に する...
各センターでは、 また 持っている 三つ 違う 人々 参加しています。
I 欲しい に 追加 別の カテゴリカル 要素 また と 三つ レベル。
これ は 行く に なれ 私たちの 評価者。
これら は のように その 人々。
さあ 名前 彼ら 1、 2、そして 3.
基本的に、 何 私は 言って は それ 中心 A 意思 持っている 評価者 1、2、3、
中心 B もっている 評価者 1、 2、そして 3、そして それで の上。
で 合計、 私たちは 持っている 九 違う 人々、
九 違う 組み合わせ の 中心 そして 評価者 で ここ。
私は 行く に 最小化 これ。
これ 実は ただ ショー その データ テーブル どこ 私たちは 引っ張られた 私たちの 共変量 から。
それから 打つ 続く ここ。
今、 私たちは 得る に 教えて JMPって何？ 親切 の モデル する 私たちは 欲しい。
そこには a カップル の もの で ここ。
初め、 I 実は 望んでいた に 追加 で。
ジャンプ 意思 自動的に 置く で あなたの 主要 効果。
これら は 全て その 要因 それ は で 私の モデル。
I 望んでいた に 置く で 一つの 交流 学期 間 中心 そして 評価者、
そして それは なぜなら I 望んでいた に 作る もちろん それ
すべての組み合わせ の 中心 そして 評価者 現れる で 私たちの デザイン。
それ 保証 それ。
その 他の もの に 知る は それ
私たちは実際に しない 持っている 十分 走る に 見積もり スライド ID。
覚えて、 スライド ID 行く から...
そこには 72 明確な スライド ID で ここ、
しかし 私たちは 実は しない 欲しい 一つの 効果、 a スライド ID 効果。
私たちは ただ JMPが欲しい に 取る それ の中へ アカウント いつ その 建設中 その デザイン。
私たちは しない 本当に 欲しい に 見積もり スライド ID。
軽視 能力 ここ、 あなた できる 変化...
その 推定可能性 のために スライド ID、
必要から、あなた できる 変化 それ に もし 可能。
それから、 最後に、 その 番号 の 実行されます。
I 考える t 彼 番号 の 走る 彼らは 計算された のために 自分 だった 18.
しかし 私たちは 実は 望んでいた に 使用 上 全て の 私たちの 走る
なぜなら 私たちは 持っている 216 走る そして 今 だった ただ 見ている に 見る...
私たちは に 得る JMPへ 教えて 私たち どうやって する 私たちは 割り当てる これら 216.
作る デザイン。
それ ただ かもしれない 取る a 少し 少し もっと長く。
病気 行く の中へ 例えば、デザインをどうやってチェックするか
そして それから 話す a 少し 少し について その 走る 注文。
これ は 何 その デザイン 見た目 のように。
私たちは 持っている 私たちの オリジナル 特徴、 特徴 1 に 4 で ここ、 その スライド ID、
そして今、それは追加されました 中心 そして 評価者 割り当てられた のために それぞれ スライド ID。
何 これ は 言って は それ 評価者 B1はスライド27に注釈を付ける必要があります。
A1 意思 注釈を付ける スライド 96, そして それで の上。
そこには すべき なれ 216 走る で ここ。
それ 見た目 わかった。
その 最後 一部 ここ 下 データ テーブル オプション、
そこには は a チェック マーク のために 実行順序列を含めます。
私は 行く に クリック はい なぜなら で 私たちの場合、
のために 注釈、 もし あなた 期待する そこには に なれ いくつかの タイプ の 時間 効果
で 何でも プロセス それ あなたは やっている。
で 私たちの 場合、 私たちは だった 多分 心配した について
意思 そこには なれ a 学ぶ 曲線、 意思 そこには なれ a 倦怠感 効果？
私たちは 欲しい に 作る もちろん それ 誰もがスライドIDから始めるわけではない
それは のように 番号の小さいスライドID
そして エンディング と その より高い 番号付き スライド ID。
私は ただ 行く に 作成をクリック テーブル。
私は 行く に 近い これ ウィンドウ のために 今。
これ は 何 今 私たちの デザイン 見た目 のように。
前に 私たちは する 私たちの 小切手、 私は ただ 行く に 作成する a 新しい カラム
どこ I できる 連結する その 中心 そして 評価者。
私は ただ ハイライト これら 二 列を右クリックします。
新しいFの下で 式 キャラクター、
I ただ 欲しい に 連結する 彼ら と a コンマ。
これ は 行く に なれ 私たちの センター、評価者 変数。
そこには あなた 行く。
三つ もの それ だった チェック中 ここ。
初め は さあ する 表にする。
私たちは 欲しい に 作る もちろん それ それぞれ 人 もっている その通り 24 画像。
それは 私の センター、右 後で、ここには 24 個あります。
それは 素晴らしい。
その 他の もの それ 私たちは 欲しい に チェック のために は それ そこには は いいえ 繰り返します。
私たちは しない 欲しい...
のために 例、 私たちは しない 欲しい スライド ID 1 いる 割り当てられた に その 同じ 人 2回
なぜなら それ だろう ない なれ 楽しい のために それ 人。
もし I する a クロス集計 の スライド センター、評価者によるID、
I すべき 見る ただ a カラム の 1秒。
それ 手段 それぞれ スライド ID だった 割り当てられた に 三つ 違う 人々。
私は ただ スクロール を通して ここ
そして 見ている で これ テーブル に 見る それ そこには は いいえ 2秒または3秒 で ここ。
それ 見た目 素晴らしい。
それから、 最後に、 I する 欲しい に チェック、
どうやって する その 場合 ミックス 見て のように 横切って これら 九 評価者ですか?
1つ 方法 の 考え の で 少なくとも視覚的に確認する
は に ただ する a 平行 プロット 使用して グラフ ビルダー。
延長します これ。
私は 行く に ハイライト 特徴 1、2、3、4
なぜなら それらの は 私の オリジナル 変数。
それから、 私の 中心 そして 評価者、 I 午前 ドラッグ それ に ここ の上 私の x- 軸。
私は 行く に 打つ これ 平行 プロット オプション 右 ここ の上 その トップ 右 アイコン。
I 得る それ。
A 実際には、 あなた しない 欲しい センター、評価者 で そこには。
私は ただ 行く に 振り向く それ オフ。
多分 何 I 欲しい は センター、ネズミ は そして その 自分の パネル。
何 これ ショー 私たち は 私たちは 持っている その 課題 から その 九 人々、
それで A1 全て その 方法 に C3.
これ は その 場合 ミックス の その 画像 それ 彼らは 得た 割り当てられた に。
A 得、 だった ただ やっている これ 視覚的に。
何 私は 見ている のために ...がないということです。
いつ あなた 見て で 彼ら 合計 それ 彼らは 全て 見て ほぼ同じ
それ 彼らは 幾分 ブレンド そして 凝集は起こっていない
そして 彼らは 見て に なれ わかった。
別の 方法 に する それ は に、 I 推測 あなた できる かぶせる。
それ 取得する a 少し 少し 難しい なぜなら I する 持っている 九 違う 色 で ここ。
しかし また、 あなたは ただ 見ている のために...
あなた しない 欲しい そこには に なれ どれでも パターン で ここ。
あなた しない 欲しい そこには に なれ 塊 の ここが緑かここが緑か
または どこでも で これ 空間。
あなた できた また チェック それ による 中心。
私は推測する 私の 色 は ない その 最高。
あなた 持っている 黄色、 ブルース、 そして 緑。
彼らは 全て 見て に なれ 良い- 混合。
それから、 I した 言及 について その 走る 注文。
何 それ は、 は それ あなた ただ 確認したい
それ いつ あなたは 伝える 人々 どうやって に する 彼らの 注釈、
あなた 欲しい に 作る もちろん それ それ は また ランダム化
時間効果がある場合、 それは 撮影 の中へ アカウント すでに。
何 私は プロット ここ は その スライド ID。
A 得、 これ は 順番に。1から100までです。
それから これ は その 走る 注文、
その 順序 の いつ その 病理学者 だろう レート これら 画像。
これ 見た目 ランダム。
私たちは できた また プロット それ による 中心 そして 評価者。
これ は のために それぞれ 個人 人。
彼らは 見て 良い。
私はただ 行く に 近い それ。
今、 病気 ただ 行く 私のPowerPointスライドに戻る
そして ただ 終わり と いくつかの 結論 ここ。
私たちは できる 使用 DOE で 選択する サンプル または テスト 症例
どこ あなた 持っている 事前情報。
もし あなた 持っている データ または 共変量 それ 選択を知らせるために使用できます。
なぜ ない 使用 彼ら？
応答 表面 モデル 有利である
もし あなたは 興味がある で その 境界 または 角 ケース。
2番 ポイント は それ あなた できる 使用 増強 DOEの複製
もし あなた 持っている a 状況 どこ あなた サンプルごとに複数の評価者が必要です。
その 仕事 または その デザイン すでに 機会を与える
に 要素 走る 注文 で あなたの プラン。
それ できた なれ 本当に 役に立つ もし 時間的効果があると予想する
そのような として a 学ぶ 曲線 または 倦怠感。
私は持っている a カップル の リンク ここ に a ブログ
それ 話す もっと または 話し合う もっと について 何 は a 共変量 で デザイン の 実験。
お願いします チェック それ 外 もし あなた 欲しい に 学ぶ もっと について これ 技術。
それから、 最後に、 I ただ 望んでいた に 言う
感謝 あなた に 全て 私の 協力者 誰が 助けた 作る これ プロジェクト 可能。
ありがとう。
