Hallo alle. Ich bin Caroll Co.
Ich bin A Statistiker bei DLH.
Heute, ICH Wille sprechen um A Projekt Ich habe daran gearbeitet
In Erstellen A Zeit- effizient Strategie für Auswählen A prüfen Satz
In Die Validierung von ein Bild Erkennung Algorithmus.
Das arbeiten War Erledigt In Zusammenarbeit mit Wissenschaftlern
aus Die National Institut für Umweltgesundheitswissenschaften,
Pathologen aus Experimental- Pathologielabore,
Und Mein Gefährte Kollegen bei DLH.
In Nagetier Toxikologie, Fortschritte im Digitalen Bildanalyse
Angebot Gelegenheiten für quantitativ Histopathologie Einschätzungen.
Ein Beispiel von Wo Digital Bild Analyse könnte Sei nützlich
liegt in der Auswertung von prüfen Artikel- induzierte immuntoxische Wirkungen
In Nagetier Milzen.
Typischerweise, Pathologen verwenden A Mikroskop
Zu auswerten ob Dort Ist Immuntoxizität in der Milz
Und machen Urteile An ob Milzen aus Tiere, die eine Behandlung erhalten
Sind anders aus Die Kontrolle Gruppe.
Das Arbeitsablauf Ist anfällig Zu inter- Und Intra-Bewerter Variabilität
In charakterisierend Unterschiede innerhalb Die Studie
Und Auch über anders Studien.
Hier ist ein Beispiel von A gezoomt- In Querschnitt Sicht von A Nagetier Milz.
Hier, Ich bin Nur zeigend aus
Spezielle Features von Interesse Zu unser Mitarbeiter Das Wir wollen Zu erfassen.
Unser Problem.
Wann Wir bekommen beteiligt In Das Projekt,
Unsere Pathologen-Mitarbeiter hatten bereits eine Ausbildung absolviert ein Algorithmus
Das messen diese Merkmale von Interesse.
Der Frage Das War gestellt Zu uns War Wie Tun Wir bestätigen Das Algorithmus?
Validierung Ist A sehr breit Begriff.
Zu eng unser Fokus,
Wir Gedanke um Was Sind manche von Die hauptsächlich Fragen Das Wir gesucht Zu Adresse.
Erste, Die Algorithmus War von wenigen Auserwählten ausgebildet,
Also Wir gesucht Zu sehen ob verschiedene Pathologen aus verschiedenen Laboren
würde zustimmen mit Die Algorithmus Ausgabe.
Zweite, Dort war mehrere Merkmale
Wo Die Algorithmus War ausgebildet Zu messen.
Wir gesucht Zu sehen Wenn Dort Sind eventuelle Besonderheiten
Wo Leistung Ist besser oder schlechter.
Dann, Wir Auch gesucht Zu sehen
wenn dieser Algorithmus dürfen halten hoch Zu gegen A breit Reichweite von Fälle.
Wenn Dort Sind beliebig blind Flecken, dürfen Wir finden ihnen?
Krank Auch erwähnen Das aus Hier weiter,
Ich werde verweisen Zu Die Bild Algorithmus als Die KI.
Eins Lösung Das Wir Gedanke von bestand darin, sowohl Menschen als auch KI zu haben
kommentieren Die Dasselbe Bilder Und vergleichen Die Ausgabe.
Das Ist Wie Es würde arbeiten.
A Gewebe Probe bekommt gescannt Also Es wendet sich hinein A Digital Bild
oder eine ganze Folie Bild WSI,
Und Das Bild bekommt gefüttert hinein Die KI für wird bearbeitet.
Dann für Menschen, Sie Sicht Die Bild verwenden ein Bildsoftware
Wo Sie dürfen manuell kommentieren Merkmale von Interesse.
Eins von Die Fragen Wir bekommen gefragt war Wie viele Bilder Tun Wir brauchen Zu bestätigen?
Als Statistiker
unser Antwort Ist stets als viele als Du dürfen oder Tun Du haben Hunderte?
Tust du haben Tausende?
Aber nach reden Zu ihnen,
Sie erkennen, dass es eine Reihe davon gibt betriebsbereit Einschränkungen Zu implementieren Das.
Der Erste Zwang War Das
da war ein brauchen für jede Bild Zu Sei ausgewertet von drei anders Menschen.
Haben drei Menschen War nützlich
so dass Wir dürfen Auch schätzen Die Variabilität zwischen Bewerter.
Es Auch wendet sich aus Das Das Verfahren von Anmerkung Ist sehr Zeit- verbrauchend.
Nach reden Zu Die Pathologen, Die maximal Nummer von Bilder
sie waren bereit Zu kommentieren War um 24 pro Person.
Dann, zuletzt, eins von Die Ziel von dieses Projekt
Ist Zu erhalten kaufen- In oder Unterstützung aus Pathologen aus andere Labore.
Es gemeint Wir erforderlich Beteiligung mehrerer Labore
Und mehrere Menschen aus jede Labor.
In Das Studie, Wir bekommen Beteiligung von drei Zentren
Und Wir hatte drei Pathologen repräsentieren jede Center.
In gesamt, Wir hatte neun Pathologen rekrutiert In Die Studie.
Basierend An alle von diese Einschränkungen,
wir haben bestimmt Das Wir dürfen bestätigen nur 72 Bilder.
Der Probenahme planen.
Jetzt Wir wissen unser Probe Größe.
Wie Tun Wir wählen Die 72?
Zufällig Auswahl Ist Okay, Aber dürfen Wir Tun besser?
Was Wir kam hoch mit War
seit Die kosten pro Bild für Die KI ist relativ gering,
Wir bekommen Die KI Zu Verfahren A größer Satz von Bilder
und dann von dort,
verwenden Information aus Die KI-Ausgabe Zu besser wählen unser 72 Proben.
Wir verwenden A Antwort Service Modell Zu wählen unser Punkte
und ein RSM wählt Punkte aus
in Richtung Die Grenzen Und Center von Die Eingang Raum.
Es ist A Modell enthaltend dein hauptsächlich zwei- Weg Interaktion Auswirkungen Und quadratisch Auswirkungen.
Das Modell War insbesondere nützlich Zu unser Validierung Problem
weil wir wollten Zu sehen für Bereiche Wo Vereinbarung scheitert zwischen Menschen Und KI.
Allgemein, Käfer neigen Zu geschehen An Die Grenze Und Kanten von Das Raum.
Das Typ von Modell passt Die Problem Das Wir hatte.
Jetzt, Wir haben A planen Zu wählen Die Bilder.
Der Frage Jetzt Ist Wie Tun Wir zuordnen diese 72 Bilder über neun Bewerter?
Wir erwarten Die Proben Zu haben A breit Reichweite von Komplexität.
Wir gesucht Zu machen Sicher Das alle bekommen A ausgewogen mischen von Folien.
Der Komplexität oder Das Fall mischen
festgestellt wird von Die Ausgabe Das Wir bekommen aus Die KI.
Wir Auch erforderlich Zu die Einschränkung erfüllen
von Herstellung Sicher Das jede Bild Ist gesehen von drei anders Menschen.
Hier Ist Mein Arbeitsablauf.
ICH Wille zeigen Du Wie ICH erstellt Die Probenahmeplan, der zufriedenstellend ist
alle von unser betriebsbereit Einschränkungen im JMP.
ICH haben drei Schritte In Das Arbeitsablauf.
Erste, Ich bin gehen Zu zeigen Du Wie Wir ausgewählt Die 72 Bilder
aus A größer Satz.
Zweite Ist Wie Wir repliziert Die 72 Bilder drei mal,
also wir haben 216 läuft.
Wir mussten das tun
weil wir wollten, dass jedes Bild es tut Sei gesehen von drei Bewerter.
Der zuletzt Schritt,
Krank zeigen Du Wie Wir haben die 216 Läufe auf neun Bewerter verteilt
Also Das jede Person hat genau 24 Bilder.
In jede von diese Schritte, ICH Wille Genau genommen Sei verwenden Die DAMHIRSCHKUH Plattform.
Jetzt, Ich bin Nur gehen Zu bewegen über Zu JMP.
ICH haben Mein JMP Datei In Dort.
Mein JMP-Journal.
ICH Bin gehen Zu offen A Probe Daten Satz,
Und ICH sagen Probe Weil unser Daten hat nicht gewesen veröffentlicht noch.
Für Die Zwecke von Das Demonstration, ICH Wille Sei verwenden A gefälscht Daten Satz.
Das Daten Satz hat Die Dasselbe Merkmale Zu Die Original Daten Das Wir gesammelt.
Das Ist Was Die Daten sieht aus wie.
ICH haben Mein gleiten AUSWEIS, welche Ist Nur A numerisch Variable gehen aus 1 Zu 100.
Gehen aus 1 Zu 100 Rechts Hier.
ICH haben vier Variablen Das Ich bin suchen für.
Das ist gewesen gesammelt von Die KI.
Merkmale 1, 2, 3, und 4.
Drei von ihnen Sind kontinuierlich Und eins Ist Konto Variable.
Wenn Du sehen bei unter Analysieren, Multivariat Methoden, Multivariat,
Wenn Wir Nur zeigen Die Streudiagramm Matrix aller Variablen, die Sie sehen werden,
alle von ihnen Sind unkorreliert.
Das Ist Die verbreiten von Die Reichweite von unser Variablen.
Schritt eins.
Unter DAMHIRSCHKUH, Es gibt A Brauch Design, darauf klicke ich.
Wir dürfen verlassen Die Antworten Y Hier. Nur verlassen Es allein.
Der Faktoren Hier, Es gibt Genau genommen zwei Wege Zu Tun Das.
Eins Weg Ist Zu klicken An Das Taste Hier Das sagt Hinzufügen Faktor.
ICH denken um fünfte von Die Weg Und Es gibt A Kovariate Auswahl.
Wenn Du klicken Das,
es wird fragen Du welche Säulen von Kovariaten Du wollen Zu enthalten In Die Design.
In Mein Fall, es ist diese vier Merkmale.
Ich bin Nur Auswählen ihnen Und Du klicken Okay.
JMP Wille automatisch Füllen Sie die Mindest- und Höchstwerte aus
für jede von diese Variablen.
Du wirst sehen Hier Das Sie sind alle behandelt als Kovariaten.
Das sieht aus Gut.
Krank Nur schnell schließen Das
Und Dann zeigen Du ein anderer Weg von tun Die Dasselbe Ding.
Wieder, In DAMHIRSCHKUH Brauch Design.
Was ICH zeigte Du War hinzufügen Es verwenden Das Weg Hier.
Ein anderer Weg Zu Tun Es Ist Zu Nur verwenden Das Taste Rechts Hier
wo steht: Kovariate auswählen Faktoren
Und es wird geben Du Die genau Dasselbe Ding.
Wieder, Ich bin pflücken Die Faktoren Das Ich bin interessiert In
und zwar automatisch besiedelt Das Faktoren Fenster.
Ich bin Nur Scrollen runter Zu Die unten Und klicken Weitermachen.
Das Ist Wo Wir dürfen setzen In Die Modell Das Wir wollen.
Für uns, Wir gesucht ein RSM oder Antwort Service Modell.
Dort Ist wieder A Abkürzung Taste Rechts Hier.
Ich bin Nur gehen Zu klicken Das.
Was Das tat Ist Es hinzugefügt...
Wir bereits haben unser hauptsächlich Faktoren In Dort,
Aber Es hinzugefügt unser Quadrate Und zwei- Weg Interaktion Auswirkungen.
Dann, zuletzt, bei Die unten rein Hier Wo Es sagt Nummer von läuft,
Wir nicht wollen 100 Weil Wir Genau genommen Nur wollen Zu wählen 72 aus von 100.
Ich bin Nur gehen Zu ändern Das Zu 72.
Das alle sieht aus Gut Zu Mich.
Krank klicken Machen Design.
Lasst uns Nur geben JMP A wenige Sekunden Zu erstellen Die Design für uns.
Hier Wir gehen.
Das Ist Die Design Das Es erstellt für uns.
Als Du dürfen sehen, Wenn Du scrollen runter,
Es nur gab uns 72 Reihen, welche Ist Was Wir hatte fragte für.
Ich bin Nur gehen Zu sagen, drehen Das hinein A Daten Tisch.
Ich bin Nur gehen Zu Schlag Machen Tisch Rechts Hier An Die unten links.
Ich bin gehen Zu schließen Das für Jetzt.
Jetzt, Vor ICH zeigen Du Was Das Design sieht aus wie,
ICH Genau genommen wollen Zu gehen zurück Zu Die Original Tisch,
Nur Also Du könnte sehen...
Wir dürfen vergleichen Was ist mit den ausgewählten Beobachtungen passiert
gegen Beobachtungen Das war nicht gepflückt.
Wenn Du gehen zurück Zu Die Original Daten Tisch, Die Einsen Das war gewählt,
Das 72 Sind Genau genommen hervorgehoben.
Was Ausweis wie Zu Tun bei Das Punkt Ist Ausweis wie Zu erstellen A neu Spalte
Das würde identifizieren welche Reihen war ausgewählt Und welche Einsen waren nicht.
Zu Tun Das, Du gehen unter Reihen.
Unter Reihe Auswahl,
Dort Ist Die zuletzt Möglichkeit In Hier sagt Name Auswahl In Spalte.
Was es wird Tun wird es Etikett Die aktuell ausgewählte Zeilen
Und speichern was auch immer Werte Du zuordnen für Das Spalte.
Ich bin gehen Zu klicken Das.
Der Spalte Name.
Y du erhalten Zu erstellen A Name für diese Spalte.
T Er Reihen Das Sind hervorgehoben, Ich bin Ich werde ihnen einen Wert von 1 geben.
Der Einsen Das war nicht ausgewählt, ICH wollen Zu geben ihnen A Wert von null.
Ich bin gehen Zu drücken Sie O kay, Und Das erstellt Das Spalte Rechts Hier.
Alle von Mein will, Es gibt 72...
Es gibt 72 Reihen für Die Einsen Das wurden ausgewählt
Und Dann 28 für Die Einsen Das war nicht ausgewählt.
ICH wollen Zu gehen zurück Zu Mein Streudiagramm Matrix Zu sehen die Antworten
oder Zu sehen welche Beobachtungen war gepflückt Und welche Einsen waren nicht.
Aber Vor Wir Tun Ich möchte sie farblich kennzeichnen
Also Das Wann Du sehen bei Die Graph,
ICH dürfen sofort Stelle welche Einsen war gepflückt Und welche Einsen waren nicht.
Ein schneller Weg von tun Das Ist Zu Tun Reihen, Farbe oder Markieren von Spalte.
Dann, Hier, ICH wollen Zu verwenden Das Spalte namens „Ausgewählt“.
Also Das alle Die Nullen Wille Sei durch einen orangefarbenen Kreis gekennzeichnet
Und alle Die Einsen Wille Sei identifiziert von A Blau Kreis.
Wir verwenden A Marker als Also.
Das könnte machen Es Einfacher Zu identifizieren Die Beobachtungen.
Krank Nur Klicken Sie auf O kay.
Jetzt, alle von Mein Reihen Sind markiert von Die Plus oder Die Kreise.
Wenn ich zu meinem... zurückgehe.
Wenn ICH gehen zurück Zu Mein Streudiagramm Matrix,
wieder, es ist unter Multivariat Methoden, Multivariat, Und ICH Nur Schlag Abrufen.
Ich bin tun Die Dasselbe Ding als ICH tat anfänglich.
Lassen Mich Klicken Sie auf „Okay“.
Ich bin Nur gehen Zu machen Das A wenig bisschen größer.
Du wirst Jetzt sehen Das Die Blau Pluspunkte Sind Die Beobachtungen Das war ausgewählt,
und das orange Kreise Sind Die Einsen Das waren nicht.
Der Einsen Das war ausgewählt
neigen dazu geschehen mehr An Die Grenze Und Kanten von unser Raum.
Das Ist genau Was Wir gesucht.
Das sieht aus Großartig Zu Mich.
Schließen wir das.
Nur Zu überzeugen selbst
Das Die Modell Ist tun Was es ist angeblich Zu Sei tun,
ICH Genau genommen tat Das Dasselbe aufstellen,
Aber Das Zeit, stattdessen von pflücken 72, Ich bin nur pflücken 24.
Lasst uns machen Es A wenig bisschen mehr extrem.
Nur Zu zeigen Du ein Beispiel von Was Das sieht aus wie.
Wieder, Jetzt Mein Auswahl.
Jetzt, Es gibt nur 24 Reihen Das Sind ausgewählt In Hier.
Lasst uns Tun Die Dasselbe Ding.
Herstellung Das A wenig bisschen größer.
Jetzt, Du sehen weniger Blau Pluspunkte Weil Dort sollen nur Sei 24.
Aber Dann du wirst sehen Wie diese Beobachtungen werden ausgewählt
gegen Die Einsen Das war nicht gepflückt.
Sie Tun neigen Zu geschehen mehr An die äußeren Grenzen,
Aber Trotzdem manche In Die Center.
Lasst uns gehen zurück Zu unser Original Problem. Also Nur schließen Das.
Das War unser Original Daten Tisch.
Derjenige, der erstellt wurde von Die Design Ist Das eins.
Was Tun Wir haben Hier?
War Trotzdem behalten Die Dasselbe Variablen Das Wir fragte JMP zu enthalten.
Wir haben unser Merkmale 1 2, 3, und 4.
Warum unser Antwort Ist Trotzdem fehlen?
Wir Jetzt haben Das neu Spalte Das sagt Kovariate Reihe Index.
Grundsätzlich, Das Nur Links Du zurück Zu dein Original Tisch.
Wenn Das sagt 88, Es würde Sei Reihe 88 An dein Original Tisch Das bekommen gefangen.
Das eins.
Das Reihe Hier sollen Sei Die Dasselbe als Das Reihe Rechts Hier.
Vor Wir bewegen, Ich bin Genau genommen Nur gehen Zu umbenennen Das Zu Mein gleiten AUSWEIS.
In Mein Fall, Die gleiten AUSWEIS, welche Ist Nur A Nummer aus 1 Zu 100,
es ist Genau genommen Nur Die Dasselbe als Die Kovariatenzeile Index.
Das War alle für Schritt eins.
Schritt zwei Ist Jetzt replizieren Die 72 Bilder.
Wie Tun Wir Tun Das?
A schnell Weg von tun Das Ist Zu gehen Zu DAMHIRSCHKUH.
Der zweite Auswahl Ist vermehren Design.
Dann Das Fenster Wille Pop hoch fragen Du Was Sind dein Antworten Und Faktoren?
ICH wissen Warum Wir nicht Wirklich eine Antwort haben,
Aber ICH denken Du Trotzdem brauchen Zu setzen In etwas In Hier.
Das ist Okay.
Du Nur setzen Es In Dort sogar obwohl es ist alle fehlen Werte.
Dann, für Die Faktoren, war gehen Zu wählen unser Merkmale 1 Zu 4.
Das Zeit, Wir würde Auch brauchen Zu wählen unser Gleiten AUSWEIS.
Klicken Okay.
Das neu Fenster knallt hoch mit alle von unser Faktoren .
Nochmals, JMP Auto- bevölkert Die Bereiche von alle von unser Variablen.
An Die unten Hier, unter Augmentation Entscheidungen,
Es gibt A replizieren Taste, Und das ist genau Was Wir brauchen.
Klicken Das Und Dann Sie werden fragen Du,
Wie viele Nummer von mal Tun Du wollen Zu ausführen jede laufen?
Der Standard Ist zwei, Aber Wir Genau genommen wollen Es Zu Sei drei
Weil Wir erforderlich jede Bild Zu zeigen hoch drei mal In unser Design.
Dann Wir klicken Okay.
Jetzt, Was du wirst sehen Ist Das In unser Design,
stattdessen von Nur 72, Wir Jetzt haben 72 mal drei.
Also Nur scrollen alle Die Weg Zu Die unten.
Wir Jetzt haben 216 Reihen.
Krank Nur klicken Machen Tisch Zu drehen Das hinein A Daten Tisch.
Also schließen Das.
A wenige mehr Dinge Das ICH wollen Zu überprüfen.
A Paar mehr Dinge ICH wollen Zu überprüfen Vor Wir bewegen An Zu Schritt drei.
Das Ist, jeden Zeit du bist tun diese Schritte,
Du wollen Zu machen Sicher Das es ist Genau genommen tun Was Du denken Es sollen Sei tun.
In Das Fall,
ICH gesucht Zu überprüfen Das jede gleiten AUSWEIS Genau genommen tritt ein drei mal.
War gehen Zu verwenden tabellieren Zu Tun Das.
Tabulate, S lide AUSWEIS, Und ICH sollen haben A zählen von drei für jede AUSWEIS.
Das ist Was Wir haben.
Das sieht aus Großartig.
Das ist Es für Schritt zwei.
Lasst uns bewegen An Zu Die zuletzt Schritt, welche Ist Die am meisten spannend Schritt.
Jetzt, Wir haben 216 Reihen Und Wir haben Die gleiten Ausweise.
Jetzt, Wir wollen Zu verteilen Das Zu neun anders Menschen.
Wie würde Wir Tun Das In A Weg Das jede Person bekommt A ausgewogen mischen?
A Cool Weg Zu Tun Es Ist benutzen DAMHIRSCHKUH wieder.
DOE, klick An DOE-Benutzerdefiniert Design.
Wie Was Wir tat Vor,
war Trotzdem gehen Zu verwenden unser Kovariate als Faktoren.
Nur wählen Merkmale 1 Zu 4 Und unser gleiten AUSWEIS.
JMP Wille Auto- bevölkern Die Min Und max.
Jetzt, alle von Die Reihe Hier Ist Sie sind alle aufgeführt als Kovariate.
Aber bei Das Punkt, ICH Genau genommen wollen Zu hinzufügen zwei mehr Faktoren.
Eins Faktor Ist A kategorisch Faktor mit drei Stufen,
Und Das Ist Die Center oder Die Labor wegen dir haben neun Pathologen,
Aber Sie sind alle Kommen aus drei anders Zentren.
Ich bin Nur gehen Zu umbenennen ihnen A, B Und C.
Dann ICH wollen Zu Tun...
In jedem Zentrum, wir Auch haben drei anders Menschen teilnehmen.
ICH wollen Zu hinzufügen ein anderer kategorisch Faktor wieder mit drei Ebenen.
Das Ist gehen Zu Sei unser Bewerter.
Diese Sind wie Die Menschen.
Lasst uns Name ihnen 1, 2 und 3.
Grundsätzlich, Was Ich bin Sprichwort Ist Das Center A Wille haben Bewerter 1, 2 und 3,
Center B hat Bewerter 1, 2 und 3, und Also An.
In gesamt, Wir haben neun anders Menschen,
neun anders Kombinationen von Center Und Bewerter In Hier.
Ich bin gehen Zu minimieren Das.
Das Genau genommen Nur zeigt an Die Daten Tisch Wo Wir gezogen unser Kovariaten aus.
Dann Schlag Weitermachen Hier.
Jetzt, Wir erhalten Zu erzählen JMP was Art von Modell Tun Wir wollen.
Es gibt A Paar von Dinge In Hier.
Erste, ICH Genau genommen gesucht Zu hinzufügen In.
JMP Wille automatisch setzen In dein hauptsächlich Auswirkungen.
Diese Sind alle Die Faktoren Das Sind In Mein Modell.
ICH gesucht Zu setzen In ein Interaktion Begriff zwischen Center Und Bewerter,
Und das ist Weil ICH gesucht Zu machen Sicher Das
alle Kombinationen von Center Und Bewerter erscheinen In unser Design.
Das Garantien Das.
Der andere Ding Zu wissen Ist Das
wir eigentlich nicht haben genug läuft Zu schätzen gleiten AUSWEIS.
Erinnern, gleiten AUSWEIS geht aus...
Es gibt 72 unterscheidbar gleiten Ausweise In Hier,
Aber Wir Genau genommen nicht wollen ein Wirkung, A gleiten AUSWEIS Wirkung.
Wir Nur will JMP Zu nehmen Das hinein Konto Wann es ist konstruieren Die Design.
Wir nicht Wirklich wollen Zu schätzen gleiten AUSWEIS.
Unter Schätzung Fähigkeit Hier, Du dürfen ändern...
Der Schätzbarkeit für gleiten AUSWEIS,
von Notwendig, du dürfen ändern Es Zu Wenn Möglich.
Dann, zuletzt, Die Nummer von läuft.
ICH denken T Er Nummer von läuft Sie berechnet für Mich War 18.
Aber Wir Genau genommen gesucht Zu verwenden hoch alle von unser läuft
Weil Wir haben 216 läuft Und Jetzt war Nur suchen Zu sehen...
Wir wollten Zu erhalten JMP zu erzählen uns Wie Tun Wir zuordnen diese 216.
Machen Design.
Es Nur könnte nehmen A wenig bisschen länger.
Krank gehen hinein Wie überprüfen wir das Design?
Und Dann sprechen A wenig bisschen um Die laufen Befehl.
Das Ist Was Die Design sieht aus wie.
Wir haben unser Original Merkmale, Merkmale 1 Zu 4 In Hier, Die gleiten AUSWEIS,
und jetzt fügte es hinzu Center Und Bewerter zugewiesen für jede gleiten AUSWEIS.
Was Das Ist Sprichwort Ist Das Bewerter B1 müsste Folie Nummer 27 kommentieren,
A1 Wille kommentieren gleiten 96, Und Also An.
Dort sollen Sei 216 läuft In Hier.
Das sieht aus Okay.
Der zuletzt Teil Hier unter Daten Tisch Optionen,
Dort Ist A überprüfen markieren für Spalte „Ausführungsreihenfolge“ einschließen.
Ich bin gehen Zu klicken Ja Weil In unser Fall,
für Anmerkung, Wenn Du erwarten Dort Zu Sei manche Typ von Zeit Wirkung
In was auch immer Verfahren Das du bist tun.
In unser Fall, Wir war Vielleicht besorgt um
Wille Dort Sei A Lernen Kurve, Wille Dort Sei A Ermüdung Wirkung?
Wir wollen Zu machen Sicher Das Nicht jeder beginnt mit einer Folien-ID
das ist wie die Dia-ID mit der niedrigeren Nummer
Und Ende mit Die höher- nummeriert gleiten Ausweise.
Ich bin Nur gehen Zu Klicken Sie auf „Erstellen“. Tisch.
Ich bin gehen Zu schließen Das Fenster für Jetzt.
Das Ist Was Jetzt unser Design sieht aus wie.
Vor Wir Tun unser Schecks, Ich bin Nur gehen Zu erstellen A neu Spalte
Wo ICH dürfen verketten Die Center Und Bewerter.
Ich bin Nur hervorheben diese zwei Spalten, klicken Sie mit der rechten Maustaste.
Unter New F ormula Charakter,
ICH Nur wollen Zu verketten ihnen mit A Komma.
Das Ist gehen Zu Sei unser Mitte, Bewerter Variable.
Dort Du gehen.
Drei Dinge Das war Überprüfung Hier.
Erste Ist Lasst uns Tun tabellieren.
Wir wollen Zu machen Sicher Das jede Person hat genau 24 Bilder.
Das ist Mein Mitte, R ater, und hier sind es 24.
Das ist Großartig.
Der andere Ding Das Wir wollen Zu überprüfen für Ist Das Dort Sind NEIN wiederholt.
Wir nicht wollen...
Für Beispiel, Wir nicht wollen gleiten AUSWEIS 1 Sein zugewiesen Zu Die Dasselbe Person zweimal
Weil Das würde nicht Sei Spaß für Das Person.
Wenn ICH Tun A Kreuztabelle von gleiten ID nach Zentrum, Bewerter,
ICH sollen sehen Nur A Spalte von 1s.
Das bedeutet jede gleiten AUSWEIS War zugewiesen Zu drei anders Menschen.
Ich bin Nur Scrollen durch Hier
Und suchen bei Das Tisch Zu sehen Das Dort Sind NEIN 2s oder 3s In Hier.
Das sieht aus Großartig.
Dann, zuletzt, ICH Tun wollen Zu überprüfen,
Wie tut Die Fall mischen sehen wie über diese neun Bewerter?
Eins Weg von Gedanke von bei Überprüfen Sie das zumindest visuell
Ist Zu Nur Tun A parallel Handlung verwenden Graph Baumeister.
Ich werde verlängern Das.
Ich bin gehen Zu Markieren Merkmale 1, 2, 3 und 4
Weil diese Sind Mein Original Variablen.
Dann, Mein Center Und Bewerter, ICH Bin Schleppen Es Zu Hier An Mein X- Achse.
Ich bin gehen Zu Schlag Das parallel Handlung Möglichkeit Rechts Hier An Die Spitze Rechts Symbol.
ICH erhalten Das.
A eigentlich, Du nicht wollen Mitte, Bewerter In Dort.
Ich bin Nur gehen Zu drehen Das aus.
Vielleicht Was ICH wollen Ist Mitte, Ratte ähm Und es ist eigen Panel.
Was Das zeigt an uns Ist Wir haben Die Zuordnungen aus Die neun Menschen,
Also A1 alle Die Weg Zu C3.
Das Ist Die Fall mischen von Die Bilder Das Sie bekommen zugewiesen Zu.
A gewinnen, war Nur tun Das visuell.
Was Ich bin suchen für ist, dass es keine gibt...
Wann Du sehen bei ihnen in Summe Das Sie alle sehen ungefähr gleich,
Das Sie sind etwas vermischt Und es kommt zu keiner Verklumpung
Und Sie sehen Zu Sei Okay.
Ein anderer Weg Zu Tun Es Ist Zu, ICH erraten Du dürfen Überlagerung.
Es bekommt A wenig bisschen hart Weil ICH Tun haben neun anders Farben In Hier.
Aber wieder, du bist Nur suchen für...
Du nicht wollen Dort Zu Sei beliebig Muster In Hier.
Du nicht wollen Dort Zu Sei Klumpen von Grün hier oben oder hier unten
oder wo auch immer In Das Raum.
Du könnte Auch überprüfen Es von Center.
Ich schätze Mein Farben Sind nicht Die am besten.
Du haben Gelb, Blues, Und Grüns.
Sie alle sehen Zu Sei Also- gemischt.
Dann, ICH tat erwähnen um Die laufen Befehl.
Was Es Ist, Ist Das Du Nur möchte sichergehen
Das Wann du bist erzählen Menschen Wie Zu Tun ihre Anmerkung,
Du wollen Zu machen Sicher Das Das Ist Auch zufällig
so dass, wenn es einen Zeiteffekt gibt, das ist genommen hinein Konto bereits.
Was Ich bin Plotten Hier Ist Die gleiten AUSWEIS.
A gewinnen, Das Ist sequentiell. Es geht von 1 bis 100.
Dann Das Ist Die laufen Befehl,
Die Reihenfolge von Wann Die Pathologe würde Rate diese Bilder.
Das sieht aus zufällig.
Wir könnte Auch Handlung Es von Center Und Bewerter.
Das Ist für jede Individuell Person.
Sie sehen Gut.
Ich bin nur gehen Zu schließen Das.
Jetzt, Krank Nur gehen zurück zu meiner PowerPoint-Folie
Und Nur Ende mit manche Schlussfolgerungen Hier.
Wir dürfen verwenden DAMHIRSCHKUH In Auswählen Proben oder prüfen Fälle
Wo Du haben vorherige Information.
Wenn Du haben Daten oder Kovariaten Das Sie können es verwenden, um die Auswahl zu informieren,
Warum nicht verwenden ihnen?
Eine Antwort Oberfläche Modell ist von Vorteil
Wenn du bist interessiert In Die Grenze oder Rand Fälle.
Zweite Punkt Ist Das Du dürfen verwenden vermehren DOE-Replikation
Wenn Du haben A Situation Wo Du benötigen mehrere Bewerter pro Stichprobe.
Der Arbeit oder Die Design bereits gibt dir eine Chance
Zu Faktor laufen Befehl In dein planen.
Das könnte Sei Wirklich nützlich Wenn Sie erwarten, dass es einen Zeiteffekt gibt
solch als A Lernen Kurve oder Ermüdung.
Ich habe A Paar von Links Hier Zu A Blog
Das sprechen mehr oder diskutieren mehr um Was Ist A Kovariate In Design von Experimente.
Bitte überprüfen Das aus Wenn Du wollen Zu lernen mehr um Das Technik.
Dann, zuletzt, ICH Nur gesucht Zu sagen
Dank Du Zu alle Mein Mitarbeiter WHO hat geholfen machen Das Projekt möglich.
Danke.
