Hallo
alle.
Ich bin
Caroll
Co.
Ich bin a Statistiker bei SCHULDEN.
Heute, I Wille sprechen um a Projekt Ich habe daran gearbeitet
In Erstellen a Zeit- effizient Strategie für Auswählen a prüfen Satz
In Die Validierung von ein Bild Erkennung Algorithmus.
Das arbeiten War Erledigt In Zusammenarbeit mit Wissenschaftlern
aus Die National Institut für Umweltgesundheitswissenschaften,
Pathologen aus Experimental- Pathologielabore,
Und Mein Gefährte Mitarbeiter bei SCHULDEN.
In Nagetier Toxikologie, Fortschritte im digitalen Bildanalyse
Angebot Gelegenheiten für quantitativ Histopathologie Beurteilungen.
Ein Beispiel von Wo digital Bild Analyse könnte Sei nützlich
ist in der Bewertung von prüfen Artikel- induzierte immuntoxische Effekte
In Nagetier Milzen.
Normalerweise Pathologen verwenden a Mikroskop
Zu auswerten ob Dort Ist Immuntoxizität in der Milz
Und machen Urteile An ob Milz aus Tiere, die eine Behandlung erhalten
Sind anders aus Die Kontrolle Gruppe.
Das Workflow Ist anfällig Zu inter- Und Intra-Rater Variabilität
In charakterisierend Unterschiede innerhalb Die Studie
Und Auch über anders Studien.
Hier ist ein Beispiel von a gezoomt- In Querschnitt Sicht von a Nagetier Milz.
Hier, Ich bin Nur zeigend aus
Besonderheiten von Interesse Zu unser Mitarbeiter Das Wir wollen Zu erfassen.
Unser Problem.
Wann Wir bekommen beteiligt In Das Projekt,
Unsere Pathologen-Kollegen hatten bereits trainiert ein Algorithmus
Das messen diese Merkmale von Interesse.
Der Frage Das War gestellt Zu uns War Wie Tun Wir bestätigen Das Algorithmus?
Validierung Ist a sehr breit Begriff.
Zu eng unser Fokus,
Wir Gedanke um Was Sind manche von Die hauptsächlich Fragen Das Wir gesucht Zu Adresse.
Erste, Die Algorithmus War von einigen wenigen Auserwählten ausgebildet,
Also Wir gesucht Zu sehen ob verschiedene Pathologen aus verschiedenen Laboren
würde zustimmen mit Die Algorithmus Ausgabe.
Zweite, Dort war mehrere Merkmale
Wo Die Algorithmus War ausgebildet Zu messen.
Wir gesucht Zu sehen Wenn Dort Sind irgendwelche besonderen Merkmale
Wo Leistung Ist besser oder schlechter.
Dann, Wir Auch gesucht Zu sehen
wenn dieser Algorithmus dürfen halten hoch Zu gegen a breit Reichweite von Fällen.
Wenn Dort Sind beliebig blind Flecken, dürfen Wir finden ihnen?
Krank Auch erwähnen Das aus Hier ab,
Ich werde verweisen Zu Die Bild Algorithmus als Die KI.
Eins Lösung Das Wir Gedanke von war, sowohl Menschen als auch KI zu haben
kommentieren Die Dasselbe Bilder Und vergleichen Die Ausgabe.
Das Ist Wie Es würde arbeiten.
A Gewebe Probe bekommt gescannt Also Es dreht sich hinein a digital Bild
oder eine ganze Folie Bild von WSI,
Und Das Bild bekommt gefüttert hinein Die KI für Verarbeitung.
Dann für Menschen, Sie Sicht Die Bild mit ein Bildsoftware
Wo Sie dürfen manuell kommentieren Merkmale von Interesse.
Eins von Die Fragen Wir bekommen gefragt wurde Wie viele Bilder Tun Wir brauchen Zu bestätigen?
Als Statistiker
unser Antwort Ist stets als viele als Du dürfen oder Tun Du haben Hunderte?
Tust du haben Tausende?
Aber nach reden Zu ihnen,
Sie erkennen, dass es eine Reihe von betriebsbereit Einschränkungen Zu implementieren Das.
Der Erste Zwang War Das
es gab eine brauchen für jede Bild Zu Sei ausgewertet von drei anders Menschen.
Haben drei Menschen War nützlich
so dass Wir dürfen Auch schätzen Die Variabilität zwischen Bewerter.
Es Auch dreht sich aus Das Das Verfahren von Anmerkung Ist sehr Zeit- verbrauchend.
Nach reden Zu Die Pathologen, Die maximal Nummer von Bilder
sie waren bereit Zu kommentieren War um 24 pro Person.
Dann, schließlich, eins von Die Ziel von dieses Projekt
Ist Zu erhalten kaufen- In oder Unterstützung aus Pathologen aus andere Labore.
Es gemeint Wir benötigt Teilnahme mehrerer Labore
Und mehrere Menschen aus jede Labor.
In Das Studie, Wir bekommen Beteiligung von drei Zentren
Und Wir hatte drei Pathologen repräsentieren jede Center.
In gesamt, Wir hatte neun Pathologen rekrutiert In Die Studie.
Basierend An alle von diese Einschränkungen,
wir haben bestimmt Das Wir dürfen bestätigen nur 72 Bilder.
Der Probenahme planen.
Jetzt Wir wissen unser Probe Größe.
Wie Tun Wir wählen Die 72?
Zufällig Auswahl Ist Okay, Aber dürfen Wir Tun besser?
Was Wir kam hoch mit War
seit Die kosten pro Bild für Die KI ist relativ niedrig,
Wir bekommen Die KI Zu Verfahren a größer Satz von Bilder
und dann von dort,
verwenden Information aus Die KI-Ausgabe Zu besser wählen unser 72 Proben.
Wir verwenden a Antwort Service Modell Zu wählen unser Punkte
und ein RSM wählt Punkte aus
in Richtung Die Grenzen Und Center von Die Eingang Raum.
Es ist a Modell enthält dein hauptsächlich zwei- Weg Interaktion Effekte Und quadratisch Effekte.
Das Modell War insbesondere nützlich Zu unser Validierung Problem
weil wir wollten Zu sehen für Bereiche Wo Vereinbarung schlägt fehl zwischen Menschen Und KI.
Allgemein, Fehler neigen Zu geschehen An Die Grenze Und Kanten von Das Raum.
Das Typ von Modell passt Die Problem Das Wir hatte.
Jetzt, Wir haben a planen Zu wählen Die Bilder.
Der Frage Jetzt Ist Wie Tun Wir zuordnen diese 72 Bilder über neun Bewerter?
Wir erwarten Die Proben Zu haben a breit Reichweite von Komplexität.
Wir gesucht Zu machen Sicher Das alle bekommen a ausgewogen mischen von Folien.
Der Komplexität oder Das Fall mischen
ist bestimmt von Die Ausgabe Das Wir bekommen aus Die KI.
Wir Auch benötigt Zu die Einschränkung erfüllen
von Herstellung Sicher Das jede Bild Ist gesehen von drei anders Menschen.
Hier Ist Mein Arbeitsablauf.
I Wille zeigen Du Wie I erstellt Die Stichprobenplan, der
alle von unser betriebsbereit Einschränkungen in JMP.
I haben drei Schritte In Das Arbeitsablauf.
Erste, Ich bin gehen Zu zeigen Du Wie Wir ausgewählt Die 72 Bilder
aus a größer Satz.
Zweite Ist Wie Wir repliziert Die 72 Bilder drei mal,
also wir haben 216 läuft.
Wir mussten dies tun
weil wir wollten, dass jedes Bild Sei gesehen von drei Bewerter.
Der zuletzt Schritt,
Krank zeigen Du Wie Wir haben die 216 Läufe auf neun Bewerter verteilt
Also Das jede Person hat genau 24 Bilder.
In jede von diese Schritte, I Wille Genau genommen Sei mit Die DAMHIRSCHKUH Plattform.
Jetzt, Ich bin Nur gehen Zu bewegen über Zu JMP.
I haben Mein JMP Datei In Dort.
Mein JMP-Journal.
I Bin gehen Zu offen a Probe Daten Satz,
Und I sagen Probe Weil unser Daten hat nicht gewesen veröffentlicht noch.
Für Die Zwecke von Das Demonstration, I Wille Sei mit a gefälscht Daten Satz.
Das Daten Satz hat Die Dasselbe Merkmale Zu Die Original Daten Das Wir gesammelt.
Das Ist Was Die Daten Aussehen wie.
I haben Mein gleiten AUSWEIS, welche Ist Nur a numerisch Variable gehen aus 1 Zu 100.
Gehen aus 1 Zu 100 Rechts Hier.
I haben vier Variablen Das Ich bin suchen für.
Das ist gewesen gesammelt von Die KI.
Merkmale 1, 2, 3 und 4.
Drei von ihnen Sind kontinuierlich Und eins Ist Konto Variable.
Wenn Du sehen bei unter Analysieren, Multivariat Methoden, Multivariat,
Wenn Wir Nur zeigen Die Streudiagramm Matrix aller Variablen, die Sie sehen werden,
alle von ihnen Sind unkorreliert.
Das Ist Die verbreiten von Die Reichweite von unser Variablen.
Schritt eins.
Unter DAMHIRSCHKUH, es gibt a Brauch Design, das ist es, was ich anklicke.
Wir dürfen verlassen Die Antworten Y Hier. Nur verlassen Es allein.
Der Faktoren Hier, es gibt Genau genommen zwei Wege Zu Tun Das.
Eins Weg Ist Zu klicken An Das Taste Hier Das sagt Hinzufügen Faktor.
I denken um fünfte von Die Weg Und es gibt a Kovariate Auswahl.
Wenn Du klicken Das,
es wird fragen Du welche Spalten von Kovariaten Du wollen Zu enthalten In Die Design.
In Mein Fall, es ist diese vier Merkmale.
Ich bin Nur Auswählen ihnen Und Du klicken Okay.
JMP Wille automatisch Füllen Sie die Min- und Max-
für jede von diese Variablen.
Du wirst sehen Hier Das Sie sind alle behandelt als Kovariaten.
Das Aussehen Gut.
Krank Nur schnell schließen Das
Und Dann zeigen Du ein anderer Weg von tun Die Dasselbe Ding.
Wieder, In DAMHIRSCHKUH Brauch Design.
Was I zeigte Du War Hinzufügen Es mit Das Weg Hier.
Ein anderer Weg Zu Tun Es Ist Zu Nur verwenden Das Taste Rechts Hier
mit der Aufschrift „Kovariate auswählen“ Faktoren
Und es wird geben Du Die genau Dasselbe Ding.
Wieder, Ich bin Kommissionierung Die Faktoren Das Ich bin interessiert In
und es automatisch besiedelt Das Faktoren Fenster.
Ich bin Nur Scrollen runter Zu Die unten Und klicken Weitermachen.
Das Ist Wo Wir dürfen setzen In Die Modell Das Wir wollen.
Für uns, Wir gesucht ein RSM oder Antwort Service Modell.
Dort Ist wieder a Abkürzung Taste Rechts Hier.
Ich bin Nur gehen Zu klicken Das.
Was Das tat Ist Es hinzugefügt...
Wir bereits haben unser hauptsächlich Faktoren In Dort,
Aber Es hinzugefügt unser Quadratische Und zwei- Weg Interaktion Effekte.
Dann, schließlich, bei Die unten in Hier Wo Es sagt Nummer von läuft,
Wir nicht wollen 100 Weil Wir Genau genommen Nur wollen Zu wählen 72 aus von 100.
Ich bin Nur gehen Zu ändern Das Zu 72.
Das alle Aussehen Gut Zu Mich.
Krank klicken Machen Design.
Lasst uns Nur geben JMP a wenige Sekunden Zu erstellen Die Design für uns.
Hier Wir gehen.
Das Ist Die Design Das Es erstellt für uns.
Als Du dürfen sehen, Wenn Du scrollen runter,
Es nur gab uns 72 Reihen, welche Ist Was Wir hatte gefragt für.
Ich bin Nur gehen Zu sagen, drehen Das hinein a Daten Tisch.
Ich bin Nur gehen Zu Schlag Machen Tisch Rechts Hier An Die unten links.
Ich bin gehen Zu schließen Das für Jetzt.
Jetzt, vor I zeigen Du Was Das Design Aussehen wie,
I Genau genommen wollen Zu gehen zurück Zu Die Original Tisch,
Nur Also Du könnte sehen...
Wir dürfen vergleichen Was ist mit den Beobachtungen passiert, die ausgewählt wurden
gegen Beobachtungen Das war nicht ausgewählt.
Wenn Du gehen zurück Zu Die Original Daten Tisch, Die diejenigen Das war gewählt,
Das 72 Sind Genau genommen hervorgehoben.
Was Ausweis wie Zu Tun bei Das Punkt Ist Ausweis wie Zu erstellen a neu Spalte
Das würde identifizieren welche Reihen war ausgewählt Und welche diejenigen waren es nicht.
Zu Tun Das, Du gehen unter Zeilen.
Unter Reihe Auswahl,
Dort Ist Die zuletzt Option In Hier sagt Name Auswahl In Spalte.
Was es wird Tun ist es Etikett Die aktuell ausgewählte Zeilen
Und speichern was auch immer Werte Du zuordnen für Das Spalte.
Ich bin gehen Zu klicken Das.
Der Spalte Name.
Y oder erhalten Zu erstellen a Name für diese Spalte.
T Er Reihen Das Sind hervorgehoben, Ich bin werde ihnen einen Wert von 1 geben.
Der diejenigen Das war nicht ausgewählt, I wollen Zu geben ihnen a Wert von null.
Ich bin gehen Zu drücken Sie O Weil, Und Das erstellt Das Spalte Rechts Hier.
Alle von Mein will, es gibt 72...
Es gibt 72 Reihen für Die diejenigen Das wurden ausgewählt
Und Dann 28 für Die diejenigen Das war nicht ausgewählt.
I wollen Zu gehen zurück Zu Mein Streudiagramm Matrix Zu sehen die Antworten
oder Zu sehen welche Beobachtungen war gepflückt Und welche diejenigen waren es nicht.
Aber vor Wir Tun dass ich sie farblich kennzeichnen möchte
Also Das Wann Du sehen bei Die Graph,
I dürfen sofort Stelle welche diejenigen war gepflückt Und welche diejenigen waren es nicht.
Ein kurzer Weg von tun Das Ist Zu Tun Reihen, Farbe oder Markieren von Spalte.
Dann, Hier, I wollen Zu verwenden Das Spalte mit dem Namen „Ausgewählt“
Also Das alle Die Nullen Wille Sei gekennzeichnet durch einen orangefarbenen Kreis
Und alle Die diejenigen Wille Sei identifiziert von a Blau Kreis.
Wir verwenden a Marker als Also.
Das könnte machen Es Einfacher Zu identifizieren Die Beobachtungen.
Krank Nur Klicken Sie auf O Weil.
Jetzt, alle von Mein Reihen Sind markiert von Die Plus oder Die Kreise.
Wenn ich zurückgehe zu meinem...
Wenn I gehen zurück Zu Mein Streudiagramm Matrix,
wieder, es ist unter Multivariat Methoden, Multivariat, Und I Nur Schlag Abrufen.
Ich bin tun Die Dasselbe Ding als I tat anfänglich.
Lassen Mich Klicken Sie auf „OK“.
Ich bin Nur gehen Zu machen Das a wenig bisschen größer.
Du wirst Jetzt sehen Das Die Blau Pluspunkte Sind Die Beobachtungen Das war ausgewählt,
und die orange Kreise Sind Die diejenigen Das waren es nicht.
Der diejenigen Das war ausgewählt
neigen dazu, geschehen mehr An Die Grenze Und Kanten von unser Raum.
Das Ist genau Was Wir gesucht.
Das Aussehen Großartig Zu Mich.
Lassen Sie uns das schließen.
Nur Zu überzeugen selbst
Das Die Modell Ist tun Was es ist angeblich Zu Sei tun,
I Genau genommen tat Das Dasselbe aufstellen,
Aber Das Zeit, stattdessen von Kommissionierung 72, Ich bin nur Kommissionierung 24.
Lasst uns machen Es a wenig bisschen mehr extrem.
Nur Zu zeigen Du ein Beispiel von Was Das Aussehen wie.
Wieder, Jetzt Mein Auswahl.
Jetzt, es gibt nur 24 Reihen Das Sind ausgewählt In Hier.
Lasst uns Tun Die Dasselbe Ding.
Herstellung Das a wenig bisschen größer.
Jetzt, Du sehen weniger Blau Pluspunkte Weil Dort sollen nur Sei 24.
Aber Dann du wirst sehen Wie diese Beobachtungen werden ausgewählt
gegen Die diejenigen Das war nicht ausgewählt.
Sie Tun neigen Zu geschehen mehr An die äußeren Grenzen,
Aber Trotzdem manche In Die Center.
Lasst uns gehen zurück Zu unser Original Problem. Also Nur schließen Das.
Das War unser Original Daten Tisch.
Derjenige, der erstellt wurde von Die Design Ist Das eins.
Was Tun Wir haben Hier?
War Trotzdem halten Die Dasselbe Variablen Das Wir gefragt JMP zu enthalten.
Wir haben unser Merkmale 1 2, 3 und 4.
Warum unser Antwort Ist Trotzdem fehlen?
Wir Jetzt haben Das neu Spalte Das sagt Kovariate Reihe Index.
Grundsätzlich, Das Nur Links Du zurück Zu dein Original Tisch.
Wenn Das sagt 88, Es würde Sei Reihe 88 An dein Original Tisch Das bekommen gefangen.
Das eins.
Das Reihe Hier sollen Sei Die Dasselbe als Das Reihe Rechts Hier.
Vor Wir bewegen, Ich bin Genau genommen Nur gehen Zu umbenennen Das Zu Mein gleiten AUSWEIS.
In Mein Fall, Die gleiten AUSWEIS, welche Ist Nur a Nummer aus 1 Zu 100,
es ist Genau genommen Nur Die Dasselbe als Die Kovariate-Zeile Index.
Das War alle für Schritt eins.
Schritt zwei Ist Jetzt Replikation Die 72 Bilder.
Wie Tun Wir Tun Das?
A schnell Weg von tun Das Ist Zu gehen Zu DAMHIRSCHKUH.
Der zweite Auswahl Ist erweitern Design.
Dann Das Fenster Wille Pop hoch fragen Du Was Sind dein Antworten Und Faktoren?
I wissen Warum Wir nicht Wirklich eine Antwort haben,
Aber I denken Du Trotzdem brauchen Zu setzen In etwas In Hier.
Das ist Okay.
Du Nur setzen Es In Dort sogar obwohl es ist alle fehlen Werte.
Dann, für Die Faktoren, war gehen Zu wählen unser Merkmale 1 Zu 4.
Das Zeit, Wir würde Auch brauchen Zu wählen unser Gleiten AUSWEIS.
Klicken Okay.
Das neu Fenster Knallt hoch mit alle von unser Faktoren .
Nochmals JMP Auto- bevölkert Die Bereiche von alle von unser Variablen.
An Die unten Hier, unter Augmentation Auswahlmöglichkeiten,
es gibt a replizieren Taste, Und das ist genau Was Wir brauchen.
Klicken Das Und Dann sie werden fragen Du,
Wie viele Nummer von mal Tun Du wollen Zu durchführen jede laufen?
Der Standard Ist zwei, Aber Wir Genau genommen wollen Es Zu Sei drei
Weil Wir benötigt jede Bild Zu zeigen hoch drei mal In unser Design.
Dann Wir klicken Okay.
Jetzt, Was du wirst sehen Ist Das In unser Design,
stattdessen von Nur 72, Wir Jetzt haben 72 mal drei.
Also Nur scrollen alle Die Weg Zu Die unten.
Wir Jetzt haben 216 Reihen.
Krank Nur klicken Machen Tisch Zu drehen Das hinein a Daten Tisch.
Also schließen Das.
A wenige mehr Dinge Das I wollen Zu überprüfen.
A Paar mehr Dinge I wollen Zu überprüfen vor Wir bewegen An Zu Schritt drei.
Das Ist, jeder Zeit du bist tun diese Schritte,
Du wollen Zu machen Sicher Das es ist Genau genommen tun Was Du denken Es sollen Sei tun.
In Das Fall,
I gesucht Zu überprüfen Das jede gleiten AUSWEIS Genau genommen tritt auf drei mal.
War gehen Zu verwenden tabellieren Zu Tun Das.
Tabulieren, S leiden AUSWEIS, Und I sollen haben a zählen von drei für jede AUSWEIS.
Das ist Was Wir haben.
Das Aussehen Großartig.
Das ist Es für Schritt zwei.
Lasst uns bewegen An Zu Die zuletzt Schritt, welche Ist Die am meisten spannend Schritt.
Jetzt, Wir haben 216 Reihen Und Wir haben Die gleiten IDs.
Jetzt, Wir wollen Zu verteilen Das Zu neun anders Menschen.
Wie würde Wir Tun Das In a Weg Das jede Person bekommt a ausgewogen mischen?
A Cool Weg Zu Tun Es Ist zu verwenden DAMHIRSCHKUH wieder.
DOE, klicken Sie An DOE Custom Design.
Wie Was Wir tat vor,
war Trotzdem gehen Zu verwenden unser Kovariate als Faktoren.
Nur wählen Merkmale 1 Zu 4 Und unser gleiten AUSWEIS.
JMP Wille Auto- bevölkern Die Minuten Und max.
Jetzt, alle von Die Reihe Hier Ist Sie sind alle aufgeführt als Kovariate.
Aber bei Das Punkt, I Genau genommen wollen Zu hinzufügen zwei mehr Faktoren.
Eins Faktor Ist a kategorisch Faktor mit drei Ebenen,
Und Das Ist Die Center oder Die Labor weil du haben neun Pathologen,
Aber Sie sind alle Kommen aus drei anders Zentren.
Ich bin Nur gehen Zu umbenennen ihnen A, B Und C.
Dann I wollen Zu Tun...
In jedem Zentrum Auch haben drei anders Menschen teilnehmen.
I wollen Zu hinzufügen ein anderer kategorisch Faktor wieder mit drei Ebenen.
Das Ist gehen Zu Sei unser Bewerter.
Diese Sind wie Die Menschen.
Lasst uns Name ihnen 1, 2 und 3.
Grundsätzlich, Was Ich bin sagen Ist Das Center A Wille haben Bewerter 1, 2 und 3,
Center B hat Bewerter 1, 2 und 3 und Also An.
In gesamt, Wir haben neun anders Menschen,
neun anders Kombinationen von Center Und Bewerter In Hier.
Ich bin gehen Zu minimieren Das.
Das Genau genommen Nur zeigt Die Daten Tisch Wo Wir gezogen unser Kovariaten aus.
Dann Schlag Weitermachen Hier.
Jetzt, Wir erhalten Zu erzählen JMP was Art von Modell Tun Wir wollen.
Es gibt a Paar von Dinge In Hier.
Erste, I Genau genommen gesucht Zu hinzufügen In.
JMP Wille automatisch setzen In dein hauptsächlich Effekte.
Diese Sind alle Die Faktoren Das Sind In Mein Modell.
I gesucht Zu setzen In ein Interaktion Begriff zwischen Center Und Bewerter,
Und das ist Weil I gesucht Zu machen Sicher Das
alle Kombinationen von Center Und Bewerter erscheinen In unser Design.
Das Garantien Das.
Der andere Ding Zu wissen Ist Das
wir tatsächlich nicht haben genug Läufe Zu schätzen gleiten AUSWEIS.
Erinnern, gleiten AUSWEIS geht aus...
Es gibt 72 unterscheidbar gleiten IDs In Hier,
Aber Wir Genau genommen nicht wollen ein Wirkung, a gleiten AUSWEIS Wirkung.
Wir Nur wollen JMP Zu nehmen Das hinein Konto Wann es ist Bauen Die Design.
Wir nicht Wirklich wollen Zu schätzen gleiten AUSWEIS.
Unter Wertschätzung Fähigkeit Hier, Du dürfen ändern...
Der Schätzbarkeit für gleiten AUSWEIS,
von Necessary, Sie dürfen ändern Es Zu Wenn Möglich.
Dann, schließlich, Die Nummer von läuft.
I denken t Er Nummer von Läufe Sie berechnet für Mich War 18.
Aber Wir Genau genommen gesucht Zu verwenden hoch alle von unser Läufe
Weil Wir haben 216 Läufe Und Jetzt war Nur suchen Zu sehen...
Wir wollten Zu erhalten JMP zu erzählen uns Wie Tun Wir zuordnen diese 216.
Machen Design.
Es Nur könnte nehmen a wenig bisschen länger.
Krank gehen hinein Wie überprüfen wir das Design?
Und Dann sprechen a wenig bisschen um Die laufen Befehl.
Das Ist Was Die Design Aussehen wie.
Wir haben unser Original Merkmale, Merkmale 1 Zu 4 In Hier, Die gleiten AUSWEIS,
und jetzt fügte es hinzu Center Und Bewerter zugewiesen für jede gleiten AUSWEIS.
Was Das Ist sagen Ist Das Bewerter B1 müsste Folie Nummer 27 kommentieren,
A1 Wille kommentieren gleiten 96, Und Also An.
Dort sollen Sei 216 Läufe In Hier.
Das Aussehen Okay.
Der zuletzt Teil Hier unter Daten Tisch Optionen,
Dort Ist a überprüfen markieren für Spalte „Ausführungsreihenfolge“ einschließen.
Ich bin gehen Zu klicken Ja Weil In unser Fall,
für Anmerkung, Wenn Du erwarten Dort Zu Sei manche Typ von Zeit Wirkung
In was auch immer Verfahren Das du bist tun.
In unser Fall, Wir war Vielleicht besorgt um
Wille Dort Sei a Lernen Kurve, Wille Dort Sei a Ermüdung Wirkung?
Wir wollen Zu machen Sicher Das nicht jeder beginnt mit einer Folien-ID
das ist wie die Folien-ID mit der niedrigeren Nummer
Und Ende mit Die höher- nummeriert gleiten IDs.
Ich bin Nur gehen Zu klicken Sie auf Machen Tisch.
Ich bin gehen Zu schließen Das Fenster für Jetzt.
Das Ist Was Jetzt unser Design Aussehen wie.
Vor Wir Tun unser Schecks, Ich bin Nur gehen Zu erstellen a neu Spalte
Wo I dürfen verketten Die Center Und Bewerter.
Ich bin Nur Hervorhebung diese zwei Spalten, klicken Sie mit der rechten Maustaste.
Unter New F Formel Charakter,
I Nur wollen Zu verketten ihnen mit a Komma.
Das Ist gehen Zu Sei unser Zentrum, Bewerter Variable.
Dort Du gehen.
Drei Dinge Das war Überprüfung Hier.
Erste Ist lasst uns Tun tabellieren.
Wir wollen Zu machen Sicher Das jede Person hat genau 24 Bilder.
Das ist Mein Mitte, R Wasser, und hier sind 24.
Das ist Großartig.
Der andere Ding Das Wir wollen Zu überprüfen für Ist Das Dort Sind NEIN Wiederholungen.
Wir nicht wollen...
Für Beispiel, Wir nicht wollen gleiten AUSWEIS 1 Sein zugewiesen Zu Die Dasselbe Person zweimal
Weil Das würde nicht Sei Spaß für Das Person.
Wenn I Tun a Kreuztabelle von gleiten ID nach Zentrum, Bewerter,
I sollen sehen Nur a Spalte von 1 Sekunde.
Das bedeutet jede gleiten AUSWEIS War zugewiesen Zu drei anders Menschen.
Ich bin Nur Scrollen durch Hier
Und suchen bei Das Tisch Zu sehen Das Dort Sind NEIN 2 Sekunden oder 3 Sekunden In Hier.
Das Aussehen Großartig.
Dann, schließlich, I Tun wollen Zu überprüfen,
Wie tut Die Fall mischen sehen wie über diese neun Bewerter?
Eins Weg von Gedanke von bei zumindest visuell überprüfen
Ist Zu Nur Tun a parallel Handlung mit Graph Baumeister.
Ich werde verlängern Das.
Ich bin gehen Zu Highlight Merkmale 1, 2, 3 und 4
Weil diese Sind Mein Original Variablen.
Dann, Mein Center Und Bewerter, I Bin ziehen Es Zu Hier An Mein X- Achse.
Ich bin gehen Zu Schlag Das parallel Handlung Option Rechts Hier An Die Spitze Rechts Symbol.
I erhalten Das.
A eigentlich, Du nicht wollen Zentrum, Bewerter In Dort.
Ich bin Nur gehen Zu drehen Das aus.
Vielleicht Was I wollen Ist Mitte, Ratte Ist Und es ist eigen Bedienfeld.
Was Das zeigt uns Ist Wir haben Die Aufgaben aus Die neun Menschen,
Also A1 alle Die Weg Zu C3.
Das Ist Die Fall mischen von Die Bilder Das Sie bekommen zugewiesen Zu.
A gewinnen, war Nur tun Das visuell.
Was Ich bin suchen für ist, dass es keine gibt...
Wann Du sehen bei ihnen in Summe Das Sie alle sehen ungefähr gleich,
Das Sie sind etwas vermischt Und es kommt nicht zu einer Verklumpung
Und Sie sehen Zu Sei Okay.
Ein anderer Weg Zu Tun Es Ist Zu, I erraten Du dürfen Überlagerung.
Es bekommt a wenig bisschen hart Weil I Tun haben neun anders Farben In Hier.
Aber wieder, du bist Nur suchen für...
Du nicht wollen Dort Zu Sei beliebig Muster In Hier.
Du nicht wollen Dort Zu Sei Klumpen von grün hier oben oder hier unten
oder wo immer In Das Raum.
Du könnte Auch überprüfen Es von Center.
Ich schätze Mein Farben Sind nicht Die am besten.
Du haben Gelb, Blues, Und Grüns.
Sie alle sehen Zu Sei Also- gemischt.
Dann, I tat erwähnen um Die laufen Befehl.
Was Es Ist, Ist Das Du Nur möchte sichergehen
Das Wann du bist erzählen Menschen Wie Zu Tun ihre Anmerkung,
Du wollen Zu machen Sicher Das Das Ist Auch randomisiert
so dass, wenn es eine zeit wirkung, das ist genommen hinein Konto bereits.
Was Ich bin Plotten Hier Ist Die gleiten AUSWEIS.
A gewinnen, Das Ist sequentiell. Es geht von 1 bis 100.
Dann Das Ist Die laufen Befehl,
Die Sequenz von Wann Die Pathologe würde Rate diese Bilder.
Das Aussehen zufällig.
Wir könnte Auch Handlung Es von Center Und Bewerter.
Das Ist für jede Person Person.
Sie sehen Gut.
Ich bin nur gehen Zu schließen Das.
Jetzt, Krank Nur gehen zurück zu meiner PowerPoint-Folie
Und Nur Ende mit manche Schlussfolgerungen Hier.
Wir dürfen verwenden DAMHIRSCHKUH In Auswählen Proben oder prüfen Fälle
Wo Du haben Vorabinformationen.
Wenn Du haben Daten oder Kovariaten Das Sie können verwenden, um die Auswahl zu informieren,
Warum nicht verwenden ihnen?
Eine Antwort Oberfläche Modell ist vorteilhaft
Wenn du bist interessiert In Die Grenze oder Rand Fällen.
Zweite Punkt Ist Das Du dürfen verwenden erweitern DOE-Replikation
Wenn Du haben a Situation Wo Du Es werden mehrere Bewerter pro Stichprobe benötigt.
Der Arbeit oder Die Design bereits gibt Ihnen eine Gelegenheit
Zu Faktor laufen Befehl In dein planen.
Das könnte Sei Wirklich nützlich Wenn Sie erwarten einen Zeiteffekt
solch als a Lernen Kurve oder Ermüdung.
Ich habe a Paar von Links Hier Zu a Blog
Das sprechen mehr oder diskutieren mehr um Was Ist a Kovariate In Design von Experimente.
Bitte überprüfen Das aus Wenn Du wollen Zu lernen mehr um Das Technik.
Dann, schließlich, I Nur gesucht Zu sagen
Dank Du Zu alle Mein Mitarbeiter WHO geholfen machen Das Projekt möglich.
Danke.