Der am meisten berühmt Zitat In alle von Statistiken Ist George Boxen
"Alle Modelle Sind falsch, Aber manche Sind nützlich."
Ich habe gehört Das Zitat bei fast jeden Konferenz
Ich habe immer gewesen Zu, Und Weil von Das,
Zu Mein Erinnerung, Ich habe Genau genommen vermieden verwenden Das Zitat In beliebig sprechen Vor.
Aber Wann ICH sah hoch
Die Erste Zeit Es War immer Satz In drucken, Es War In A 1976 Tagebuch
von Die amerikanisch Statistisch Verband Artikel.
Es ist gefunden In A Abschnitt angerufen Sparsamkeit.
Sofort nach Das Erste Beispiel
von Die Zitat, Er Gespräche um Die Bedeutung von finden
Die am einfachsten Modell Das beschreibt Die beobachtet Phänomene.
Das Beträge Zu finden Modelle Das Angebot A vernünftig Gleichgewicht
von Güte der Anpassung gegen Modell Komplexität Und Ist genau
Was Ich bin gehen Zu Sei reden um Heute In Das Präsentation.
JMP Und JMP Profi Angebot A viel von anders Modellieren Fähigkeiten,
jede mit A viel von Ausgabe verwandt Zu wählen A Modell.
Heute Ich bin gehen Zu gehen hinein manche Detail hinein manche von Die am meisten wichtig von diese,
hervorheben ihre Motivation Und Die Annahmen hinter ihnen.
A viel von Die Diskussion Wille Sei um Die AICc Und BIC-Modell Auswahl Kriterien,
welche Sind Direkte Und sehr Daten- effizient Werkzeuge für Adressierung Die Problem.
Kasten hatte In Geist mit sein Zitat,
welche Ist Wie Zu finden A nützlich Modell aus A Satz von fehlerhaft oder falsch Einsen.
Als ICH War Putten Das Präsentation zusammen,
ICH ging durch Die Ableitungen von Die AIC Und Die Bic.
ICH gesucht Zu erhalten A klar Verständnis
von Was diese ähnlich- suchen Methoden Wirklich Sind Und Was Annahmen Sie gemacht.
Nachher, aus von Neugier,
ICH tat ein Internet suchen von AIC gegen BIC versus Kreuzvalidierung.
Es War interessant Zu sehen In alle diese Internet Formen Das Dort Ist Trotzdem
Also viel Debatte, sogar obwohl diese Methoden haben gewesen um für 50 Jahre.
Haben kürzlich überprüft Die Ableitungen von Die Methoden,
Es sieht aus wie Dort Sind Trotzdem A viel von Missverständnisse aus Dort.
ICH denken Die Grund für Das Ist Das beide Modell Auswahl Kriterien
haben sehr tief Und technisch Ableitungen
trotz Die Einfachheit von ihre Formeln, beide von ihnen Sind gleich Zu Minus zwei mal
Die Log-Wahrscheinlichkeit von Die tailliert Modell,
Plus A einfach Strafe basierend An Die Nummer von Modell Parameter.
Du kippen erraten Die Gründe dafür
für Die Strafe Bedingungen aus Die Formel allein,
welche macht ihnen erscheinen mystisch Und willkürlich.
Eins von Mein Ziele Heute Ist Zu versuchen
Zu entmystifizieren diese ohne gehen über Bord An Die Mathematik.
Zu setzen Das alle In Die Kontext von ein Analyse Arbeitsablauf,
Wir dürfen denken von ein Analyse Projekt als haben vier wesentlich Schritte.
Wir Erste haben Zu erwerben Die Daten, erhalten Es organisiert Und gereinigt hoch.
Dann Wir fit mehrere Modelle Zu Es In A Weg
Das Ist entweder Handbuch oder automatisiert von Software wie JMP oder JMP Profi.
Einmal wir haben Erledigt Das, Dann Wir brauchen Zu wählen eins von ihnen
als Die Modell Das war gehen Zu arbeiten mit ziehen um nach vorne.
Das Ist A kritisch Schritt In Die Verfahren Das Also Sei Fokussierung An Heute.
Es ist wichtig Das Wir erhalten Die Modell Auswahl Rechts
Weil Die Qualität von Die Ergebnisse Und Die Schlussfolgerungen Wir machen
bei Die Ende erfordert Das Wir haben A vernünftig Gut Modell.
Hier Sind Die hauptsächlich Wege Das Ich habe gesehen Menschen machen Entscheidungen um Modelle.
Hypothese testen Ist wahrscheinlich Die Erste eins Menschen lernen um.
Diese Sind am meisten häufig gebraucht Zu bestimmen Wenn A Rückschritt Koeffizient
Ist statistisch gesehen bedeutend anders aus null,
welche Geräusche wie A Modell Auswahl Problem.
Während Sie Sind oft gebraucht In Das Weg,
Hypothese Tests Sind abgeleitet unter A Spezifisch Satz von Annahmen
Das ausdrücklich tut nicht Konto für haben geändert Die Modell
oder haben gebraucht A Modell Das War gewählt als Die am besten
unter mehrere Alternativen.
Dann Wir haben Die allgemein empirisch Verfahren Das bewerten Modelle basierend
An Daten gehaltenen aus aus Die Modell passend zu Verfahren.
Diese Techniken dürfen Sei angewandt Zu beide klassisch statistisch Modelle
als Also als Maschine Lernen Modelle.
In Mein Meinung, aushalten Validierung, In besondere, Ist Die Weg Zu gehen
Wenn Du haben A ganz viel von Daten.
Dann Wir haben Was alle angerufen Die klein Daten analytisch Verfahren.
Diese war abgeleitet für Situationen Wann Du haben Zu machen A Entscheidung
um welche Modell Zu verwenden, Aber Du nicht haben genug Daten
Zu halten aus beliebig Beobachtungen.
Der am meisten häufig gebraucht von diese Sind Die AIC Und Die BIC.
Aber Dort Sind andere Also- bekannt Techniken
wie Generalisiertes C Ross-Validierung Und Mallows C P.
Es wendet sich aus Das diese zwei Sind Genau genommen asymptotisch Äquivalent
Zu Die AIC, Also In groß Proben Du sollen erhalten Die Dasselbe Schlussfolgerungen aus GCV,
Mallows CP, Und Die AIC, In besondere, für bei am wenigsten Quadrate- basierend Modelle.
Dann Wir Auch haben Was Krank Anruf Modell- Spezifisch Ansätze wie VIP
Und teilweise Quadrate Modelle Und Die kubisch Clusterbildung Kriterium
im Clustering Modelle.
Diese Sind hübsch Nische Und ICH Gewohnheit Sei reden um ihnen beliebig mehr Hier Heute.
Dann Wir Auch haben visuell Werkzeuge wie tatsächlich von vorhergesagt Grundstücke
Und ROC Kurven.
Egal von Wie Du wählen dein Modell,
diese Grundstücke Sind Gut Zu nehmen A sehen bei Vor ziehen um nach vorne mit A Modell
Weil Sie bieten mehr interessant Information
als beliebig Individuell Statistik Wille Und dürfen erzählen uns Wenn Die am besten Modell
Das wir haben berücksichtigt Also weit Ist Trotzdem A Gut genug Modell für uns Zu verwenden.
Mein eigen Erste begegnen mit Modell Auswahl Kriterien In Mein Fachmann Leben
War zurück In Die Mitte 2000, um Wann JMP 5 Und JMP 6 war aus.
JMP hatte hinzugefügt Die Fähigkeit Zu bieten Fähigkeit Analysen
für nicht- normal Verteilungen.
Fähigkeit Analyse Ist A sehr wichtig Werkzeug
für beurteilen ob A Herstellung Verfahren Ist " fähig"
von liefern Produkte Das Sind innerhalb Spezifikation.
JMP Benutzer gesucht Zu bestimmen Die " am besten Verteilung" für Die Daten
Also ihre Verfahren Fähigkeit Metriken würde am besten reflektieren Die Wirklichkeit
von ihre Situation.
JMP Kunden verstanden Das Du könnte fit anders Verteilungen mit JMP
Und wusste Das viele von Die Verteilungen kam mit A Güte der Anpassung prüfen In A Fall
von haben A Hammer verursachend Du Zu finden Nägel überall.
Sie war versuchen alle Die Verteilungen Sie könnte finden Und war wählen Die eins
mit Die größten p-Wert als Die Verteilung
für ihre Fähigkeit Analyse.
Sie gesucht uns Zu kodifizieren Das hinein A neu fit alle Verteilungen Besonderheit
Das würde automatisieren Das Verfahren für ihnen.
Aber Wir war eher unbequem mit Das Anfrage für A Nummer von Gründe dafür.
Für eins Ding, Die anders Verteilungen sich einfügen JMP
kam mit anders Arten von Güte der Anpassung Tests.
Der normal hatte A Shapiro- Wilk prüfen.
Der Weibull hatte A Cramér–von Mises prüfen, Und Die LogNormal hatte A Kolmogorow prüfen.
Es ist sehr seltsam Zu vergleichen Tests
Das Sind eher anders aus eins ein anderer.
Ein anderer Problem mit Das Ansatz Ist Das Verteilungen mit mehr Parameter
Sind gehen Zu neigen Zu haben ein Rand An diese mit weniger.
Wenn Wir wählen Die Verteilung basierend An Die größten p-Wert,
Es Wille stets favorisieren Verteilungen
mit mehr Parameter als Wir sehen Hier mit Die zwei- Parameter normal verglichen
mit Die vier- Parameter Johnson Su Verteilung.
Dann für manche von Die Verteilungen
wie Die Weibulls Cramer von Mises W prüfen,
Wir nur hatte Tisch Werte von p-Werte gehen hoch Zu etwas wie P gleicht 25.
Aber sogar Wenn Wir konsolidiert alle Die Güte der Anpassung Tests runter
Zu Nur eins Und bekommen genau p-Werte für alle von ihnen,
Es gibt Trotzdem A größer philosophisch Ausgabe bei Einsatz Und das ist Das Hypothese prüfen
wie diese dürfen nur quantifizieren Beweis gegen Die Null Hypothese.
Wenn Die Null Hypothese Ist WAHR,
Dann Die p-Wert Ist A gleichmäßig verteilt zufällig Variable.
In andere Wörter, Wenn Die Null Hypothese Ist WAHR,
Dann Die Wahrscheinlichkeit Das Die p-Wert Ist zwischen 0,1 Und 0,2 Ist genau
Die Dasselbe als Die Wahrscheinlichkeit Das Es Ist zwischen 0,8 Und 0,9.
S eeing A p-Wert von 0,9 ist nicht mehr Beweis Das Die Hypothese
Ist WAHR als A p-Wert von 0,3.
Rückkehr Zu unser Beispiel, Weil alle vier von diese Verteilungen
haben Güte- von- fit p-Werte größer als 0,05.
Durch Das Linse, alle vier Verteilungen
fit Die Daten vernünftig Also, sogar obwohl Die Güte der Anpassung Tests sagen
alle Die Verteilungen Sind Gut, Die Schlussfolgerungen um Die Verfahren
Erstellen Die Daten Sind anders abhängig An Die Verteilung.
Wenn Du verwenden A Gipfel Referenz Wert von 1.33
Zu bestimmen Wenn Die Verfahren Ist fähig, Dann wählen Die lebensfähig zeigt an
Das Die Verfahren Ist nicht ausreichend fähig Zu treffen Die Spezifikationen,
wohingegen Die andere Verteilungen angeben Das Die Verfahren Ist fähig.
Wir erkenne Das Dort hatte Zu Sei A besser Weg Zu bestimmen
Die Verteilung automatisch Und kam Zu Die Abschluss
Das Das sollen Sei gesehen als A sehr Basic Art von Modell Auswahl Problem.
In unser suchen für A Klang Methode für wählen A Verteilung,
Wir stolperte auf Das sehr Gut Buch An Modell Auswahl von Burnham Und Anderson.
Sie geben vorsichtig Ableitungen von Die AIC aus Die Perspektiven
von Information, Theorie, Und Kreuzvalidierung.
Sie Auch geben A Ableitung von Die BIC hinein Wie Die AIC dürfen Sei abgeleitet
In Die Dasselbe Weg mit A anders Annahme um Die vor Verteilung.
Burnham Und Anderson Auch sorgfältig zeigen
Hypothese testen Ist eher inkohärent als A Modell Auswahl Strategie.
Der Buch hatte A hübsch groß Auswirkungen An Mein eigen Ansichten von Modellieren
Und Auch An JMP statistisch Modellieren Plattformen.
Rückkehr Zu Die Verteilung Auswahl Problem für Die Moment,
Wann Wir ging voraus Und hinzugefügt A Verteilung Wähler,
Wir beendet hoch Berufung Es fit alle Und Wir Base Es An Die AICc.
Hier An Die links,
Wir haben zwei Verteilungen von Die Fähigkeit Analyse Daten
Wir war suchen bei Vor, Die normal Und Die Johnson Su.
Der Johnson Su's Güte der Anpassung p-Wert Ist größer als Die normal Weil Es hat
zwei mehr Parameter als Die normal Verteilung.
Jetzt An Die Rechts,
Wir sehen Die Ergebnisse von A fit alle verwenden Die AICc.
Der normal kommt aus als Die am besten- passend zu Verteilung,
Aber Die Johnson Su Ist nahe Die unten.
Das Ist Weil Die AICc Ist bestrafen Es für haben diese zwei extra Parameter.
Das Besonderheit hat Jetzt gewesen gebraucht viele, viele mal
Und ICH glauben Menschen Sind allgemein hübsch Glücklich mit Es.
Jetzt Ich bin gehen Zu gehen durch
A etwas Mathe Aber hoffentlich zugänglich Erläuterung
von Was Die AICc Wirklich Ist.
Alle Rechts.
Jetzt Ich bin gehen Zu gehen hinein manche Basic Theorie hinter Die AIC.
Krank Sei als knapp als möglich Und verwenden Die am besten Analogien als ICH dürfen,
Aber ICH denken Es Ist wichtig Zu Sei ausgesetzt Zu Die zugrundeliegend Konzepte Also Du dürfen sehen
Das Die AIC hat A streng Stiftung Das hat manche Sinn Zu Es.
Der AIC- Typ Auswahl Kriterien Sind basierend An A Distanz- Typ metrisch
zwischen Wahrscheinlichkeit Verteilungen angerufen Die Kullback- Leibler oder KL Abweichungen.
Es quantifiziert Die Menge
von Information verloren von verwenden Wahrscheinlichkeit Verteilung zwei
eins Wahrscheinlichkeit Verteilung eins Ist Die richtig eins.
KL Abweichungen hat Die Eigentum von stets Sein größer als oder gleich Zu null
Und Ist nur gleich Zu null Wann Die zwei Wahrscheinlichkeit Verteilungen
Sind Die Dasselbe.
Das Ist Zu sagen Das verwenden Die falsch Verteilung stets führt
Zu A theoretisch quantifizierbar, streng positiv Information Verlust.
Das Ist hübsch berauschend abstrakt Sachen,
Also Ich bin gehen Zu übersetzen Es hinein Die Sprache von statistisch Modellieren.
Wann Wir Sind verwenden Daten In Statistiken Zu lernen um Wie etwas funktioniert,
Wir Sind ausdrücklich oder implizit passend zu Wahrscheinlichkeit Modelle Zu Die Daten
Zu ungefähr Die WAHR Modell Das generiert Es.
Wenn Wir wusste Die WAHR Wahrscheinlichkeit Erstellen Mechanismus, Wir könnte verwenden Die KL Abweichungen
Zu quantifizieren Wie weit oder Wie falsch Die Modell Ist aus Die Wahrheit.
Wir könnte Dann versuchen mehrere Modelle Und finden Die eins Das Ist Die am nächsten
Zu Die Wahrheit.
Akaike anerkannt Das Und verstopft Die WAHR
Und Die Modell Wahrscheinlichkeit Formeln hinein Die KL Abweichungen Formel
Und gebraucht A wenig Algebra Zu sehen Das Die KL Abweichungen hatte zwei Bedingungen.
Der Erste Begriff nur enthält Die WAHR Wahrscheinlichkeit- Erstellen Mechanismus
für Die Daten, welche Wir dürfen niemals wissen seit Wir dürfen nur arbeiten mit Modelle.
Jedoch, Das Ist A Konstante Das Ist Die Dasselbe für alle Modelle
Das Du fit Zu Die Daten
als lang als Wir spielen von A Paar einfach Regeln.
Der zweite Begriff Ist Was Akaike entdeckt Ist empirisch schätzbar Und mit A viel
von Mathematik, Er gefunden A einfach Formel Zu schätzen Das zweite Begriff.
In besondere,
Er entdeckt Das zwei mal Die KL Abweichungen Ist gleich Zu A Konstante
Das Ist Die Dasselbe für alle Modelle, Plus zwei mal Die Negativ Log-Wahrscheinlichkeit
von Die Daten gebraucht Zu fit Die Modell, Plus zwei mal Die Nummer von Parameter.
Alles hatte gewesen multipliziert von A Faktor von zwei Nur Zu folgen Die Dasselbe Konvention
als A Wahrscheinlichkeit Verhältnis prüfen, seit Die Konstante Begriff Ist Die Dasselbe
für alle Modelle als lang als Wir nicht ändern
Die Antwort Daten, Wir dürfen fit mehrere Modelle,
Und Die eins wessen AIC Ist Die am kleinsten Ist Die eins Das Ist geschätzt
Zu haben Die kleinstes K L Abweichungen aus Die Wahrheit Und In A Sinn Ist Die eins
Das Ist Die am wenigsten falsch.
Benutzen Die AIC für Modell Auswahl Ist vollständig analog Zu Dort Sein
A Sammlung von Inseln Und Du wollen Zu wissen welche von Die Inseln Du wissen von
Ist am nächsten Zu ein anderer Insel Das Du wissen du wirst niemals Sei fähig
Zu erhalten Zu.
Der Direkte Lösung Zu Das Problem würde Sei Zu Berechnung Die Entfernungen
aus jede von Die Inseln Zu Die eins Das Wir wollen Zu erhalten schließen Zu.
Jetzt, Was Wenn Die Insel Wir gesucht Zu erhalten schließen Zu War umgeben
von A kreisförmig hoch Zaun Das Wir könnte Ansatz?
Der Insel Ist perfekt In Die Mitte von Die Zaun,
Also Die Distanz aus Die Center von Die Insel Zu Die Zaun
Ist stets Die Dasselbe.
Aber Die Zaun War weit genug weg aus Die Insel Das Es beigefügt
Das Wir konnte nicht sehen Es oder messen Die Distanz
aus Die Zaun Zu Die Innere Insel.
Wir dürfen Trotzdem schätzen Die Distanz aus jede Insel Zu Die Zaun.
Weil Die hauptsächlich Insel Ist In Die Center von Die Zaun,
Wir wissen Das Die Insel am nächsten Zu Die Zaun Ist Die am nächsten Insel.
Das Ist genau Die Situation mit Die AIC.
Mit Die AIC, Wir dürfen schätzen Die Distanz aus Die Wahrheit Zu jede von Die Modelle.
Jede AIC schätzen Ist aus von Die Dasselbe Menge.
Während Wir kippen schätzen Die absolut Distanz von Die Modelle
aus Die Wahrheit, Wir dürfen wissen welche Modell Ist Die am nächsten
In A relativ Sinn.
Der Original AIC Ist basierend
An Die Wahrscheinlichkeit von Die Ausbildung Daten Plus A Parameter Strafe.
Der Ausbildung Wahrscheinlichkeit beurteilt Die Güte-von- fit von Die Modell.
Wir kippen verwenden Das Begriff von selbst obwohl, Weil Es Ist voreingenommen nach unten
als Die Modell Parameter war gewählt Zu minimieren
Die Negativ Log-Wahrscheinlichkeit.
Mit A viel von Mathematik, Akaike abgeleitet A sehr einfach Ausdruck
Das korrigiert für Das Voreingenommenheit.
Der Original Strafe Ist Nur 2 K
Wo K ist Die gesamt Nummer von geschätzt Parameter.
Für linear Rückschritt mit A Neigung
Und ein abfangen, Wir Auch haben Zu zählen Die Varianz.
Für Das Fall Du würde haben K gleicht drei Und nicht zwei.
Dort Sind wichtig Annahmen Das LED Zu die 2 K Strafe.
Wir dürfen charakterisieren ihnen lose Das Die Modell hat Zu Sei vernünftig Gut.
Der AIC Ist Trotzdem gehen Zu Sei robust Jedoch, Weil Wenn A Modell Ist schlecht,
Dann Die Wahrscheinlichkeit Komponente Wille Sei groß Und Wille dominieren
Die Strafe unter Die Gut Modelle.
Der 2K Begriff Wille favorisieren Die kleiner Modelle als lang
als Die Probe Größe Ist groß.
Jedoch, Es nicht nehmen lang für Menschen Zu finden Das Das Original AIC
oft zeigt an Modelle Das Überfit In klein Proben,
Also A mehr genau, höher- Befehl Annäherung Zu Die Voreingenommenheit War abgeleitet.
Wann Das extra Begriff Ist hinzugefügt,
Die Kriterien wird bekannt als Die AICc oder Die korrigiert AIC.
Bedauerlicherweise, Die Ruf Das Die AIC Überfit
hatte werden alltäglich Vor Die Korrektur War entdeckt
Und weit bekannt um.
Der Korrektur wird unendlich als K nähert sich N
drängen Die Modell Auswahl Kriterien weg aus Modelle Das Sind fast gesättigt.
Beachten Auch Das Die Korrektur Begriff geht Zu null als N geht Zu Unendlichkeit.
In groß Proben Die AIC Und AICc Sind Äquivalent.
Der AICc Ist Was Wir gemeldet In Trumpf Weil Es funktioniert Also für klein Proben
Und Obwohl Es War abgeleitet für Gauß Verteilungen,
Erfahrung schlägt vor Das es ist Gut genug mit andere häufig gebraucht Verteilungen.
Jetzt Ich bin gehen Zu veranschaulichen Die AICc
In A real Beispiel Das War A fünf- Faktor zentral zusammengesetzt Design mit 31 läuft,
Und Die Antwort War Die Menge von P DNA produziert von A Bioreaktor.
Krank veranschaulichen Die AICc verwenden Die verallgemeinert Rückschritt Plattform,
geben Es A voll Antwort Oberfläche Modell
mit alle hauptsächlich Auswirkungen Interaktionen Und zweite- Befehl Bedingungen.
ICH fit vier Modelle Zu Die Daten.
Eins Ist A voll Antwort Oberfläche Modell verwenden am wenigsten Quadrate Das War fit automatisch.
Dann ICH verwenden nach vorne Auswahl
unter Die normal, logNormal, Und exponentiell Verteilungen.
ICH wählte Die exponentiell Verteilung Zu veranschaulichen arm Modell fit.
Der Modelle hatte 2 2, 9, 9, Und 1 Parameter jeweils,
Und Die Modell mit Die am niedrigsten AICc War Die logN normal mit ein AICc
von um 334,8.
Wir dürfen brechen Die AIC Und AICc Berechnungen
runter Zu sehen Wie anders Teile von Die Strafe Sind beitragen.
Der voll am wenigsten Quadrate Modell
hat Die am niedrigsten Wahrscheinlichkeit, Aber Die höchste AICc gesamt.
Wann Wir sehen bei Die zweite- Befehl Korrekturen Und Die Original AIC Werte,
Wir sehen Das es ist Die zweite Befehl Korrektur Begriff Das Ist drängen
Die Modell Auswahl Kriterien Zu Sei sehr groß für Das Modell.
Der logN normal nach vorne Auswahl Protokoll Wahrscheinlichkeit Ist A wenig untere
als Die normal nach vorne Auswahl eins.
Sie beide haben neun Parameter, Also ihre Strafen Sind Die Dasselbe
Und Die logN normal nach vorne Auswahl Modell hat Die untere AICc.
Der exponentiell nach vorne Auswahl Modell hat Die Ärmsten Modell fit als gemessen
von Die Log-Wahrscheinlichkeit, Aber Auch nur hat eins Parameter
In Die Modell.
Gesamt Es hat Die am kleinsten Strafe Beitrag Zu Die AICc.
Aber Die arm fit von Die Modell Ist solch Das Die Wahrscheinlichkeit dominiert
Und Die exponentiell Modell Ist Die zweite aus Die am schlimmsten als gemessen von Die AICc.
Wenn Du Rezension Die allgemein Ableitung
von Die AIC In Die Burnham Und Anderson Buch,
du wirst sehen Das Was es ist Genau genommen geschätzt Ist Die erwartet Wert
von A hypothetisch prüfen Satz Wahrscheinlichkeit für A Daten Satz Das hat Die Dasselbe Größe
Und Antwort Struktur, Aber nicht Werte als Die Ausbildung Satz.
Der erwartet Werte Auch nehmen hinein Rücksichtnahme Die Variabilität
In Die schätzen von Die MLE.
ICH finden Das Kreuzvalidierung Deutung von Die AIC
Zu Sei hübsch zwingend.
ICH denken es ist Auch wichtig Zu Punkt aus Das Das Kreuzvalidierung Ableitung
von Die AIC tut nicht annehmen bei alle Das Wir haben Die richtig Modell.
Zu zeigen Das Das Kreuzvalidierung Deutung Wirklich funktioniert,
ICH erstellt A Simulation Formel verwenden ein Durchschnitt von Die Modelle Ich habe gezeigt
In Die vorherige Folien als Also als manche andere Einsen.
Das Weg Wir wusste Das keiner von Die Modelle war Genau genommen Die richtig eins.
ICH fit jede von Die vier Modelle Zu neu Ausbildung Daten A tausend mal
Und Satz Es hoch Also Das Arbeit würde Bericht ein unabhängig aushalten Wahrscheinlichkeit
verwenden ein anderer neu Daten Satz.
ICH gehalten jede von Die vier Modelle Struktur
Und Verteilungen intakt Und tat nicht anwenden Variable Auswahl.
Das War Zu perfekt nachahmen Die genau Kreuzvalidierung Deutung
von Die AIC.
Aus Dort, ICH erstellt A Tisch von simuliert
aushalten Wahrscheinlichkeiten Und berechnet ihre Durchschnitt für jede von Die vier Modelle.
Das Ist Die AIC Und AICc Zusammenfassung Tisch aus Vor,
mit Die Simulation- basierend Durchschnitt aushalten Log-Wahrscheinlichkeiten
hinzugefügt über Hier Zu Die Rechts, Du dürfen sehen Das Die voll normal Modell
aushalten Wahrscheinlichkeit Ist sehr schließen Zu es ist AICc Wert
Und Das Die zweite- Befehl Korrektur Begriff War essentiell für Das übereinstimmen Zu passieren.
An Die andere Hand,
Du sehen Das Die simuliert Durchschnitt exponentiell aushalten Log-Wahrscheinlichkeit
Ist Auch sehr schließen Zu Die AICc.
Beide Die normal Und logN normal aushalten Wahrscheinlichkeiten Sind schließen
Zu Die Original Protokoll Normal Modelle A ICC.
Der normal aushalten Wahrscheinlichkeit Ist A wenig kleiner.
ICH Attribut Das Zu Mittelung A Bündel von Simulation Modelle,
Herstellung Die simuliert Daten A wenig bisschen mehr normalerweise verteilt
als Die Original Daten War.
Dort Sind A Paar einfach Regeln Das Sind erforderlich Zu machen AICc Vergleiche
Wirklich gültig zwischen anders Modelle.
Der am meisten wichtig Ist Das Die stochastisch Teil von Die Daten
hat Zu bleiben Die Dasselbe, Die Dasselbe Reihen haben Zu Sei gebraucht
Und Es Ist Die Ja In besondere Das muss Sei Die Dasselbe.
Der X's dürfen Sei anders, von Kurs, sogar Wenn Sie war ursprünglich zufällig,
nicht nur muss Die Ja Sei Die Dasselbe, Aber Sie kippen Sei geändert oder transformiert.
Der verwandeln würde haben Zu Sei gebaut hinein Die Modell passend.
Der AIC Ist Auch nur definiert
für brav maximal Wahrscheinlichkeit Schätzer
Und andere eng verwandt Methoden.
Das erklärt Warum Du nicht sehen AICc
für neuronal Netzwerke Und andere Maschine Lernen Modelle.
Auch, Du haben Zu halten In Geist Das Nur Weil Du gefunden A Modell Das Die AICc
sagt Ist Die am besten, Es nicht bedeuten Das Es Ist A Gut Modell.
Verwenden dein Vergangenheit Erfahrung Und Modell diagnostisch Grundstücke Zu sicherstellen
Das Die Modell Ist Rechts genug Zu Sei nützlich.
Rückkehr Zu Die pDNA Daten, Wir sehen zwei Äquivalent Modelle.
An Die Spitze, Wir haben A logN normal Modell
Und An Die unten Wir haben A normal fit Zu Die Protokoll- transformiert Antwort.
Du dürfen sehen Das Die verallgemeinert RS Quadrate
Sind Die Dasselbe für diese zwei Modelle, Aber Die AICcs Sind sehr anders.
Das Ist Weil Die logN normal fit
implizit baut Die verwandeln hinein Die Wahrscheinlichkeit.
Aber Die Protokoll Skala normal fit tut nicht.
In Das Fall, Die Rechts Ding Zu verwenden Ist Die logN normal.
Hier ist A schnell Demonstration Das Du haben Zu entscheiden Die Verteilung
Und Die Eingang Variablen bei Die Dasselbe Zeit.
Hier Ist simuliert Daten aus A Tt Europäische Sommerzeit Typ Modell
zwei Gruppen von normalerweise verteilt Daten mit Die Dasselbe Varianz,
Aber anders bedeutet.
Wenn Du fit alle In Die Verteilung Plattform,
Es wählt Die normal zwei Mischung mit ein AICc von 1036.
Das Ist Die richtig Verteilung
Wenn Du nicht wissen Die Gruppe Identität von Die Reihen.
Einmal Du enthalten Die Gruppierung Variable obwohl,
Du sehen Das Die normal kommt aus An Spitze von ein AICc von 717 oder Also.
Wir Auch versucht Die Weibull logNormal
Und Gamma Und Die normal Trotzdem kam aus An Spitze, sogar obwohl diese Verteilungen
tat besser In Verteilung ohne einschließlich Die Gruppierung Variable.
Das würdest du haben Zu versuchen anders Modell Strukturen
Und Verteilungen zusammen Zu finden Die Rechts Kombination.
Jetzt Ich bin gehen Zu ändern Getriebe Und sprechen A wenig bisschen um Die BIC,
welche Ist Die andere hauptsächlich analytisch Modell Auswahl Kriterien Und JMP.
Der BIC ist motiviert In A vollständig anders Weg
als Die AIC.
Schwartz gebraucht A groß Probe Streit In A Bayesianisch Kontext Zu ungefähr
Die Protokoll Wahrscheinlichkeit von Die Daten nach haben integriert Die Modell aus,
vorausgesetzt A Wohnung vor An Die Parameter, ein Ausdruck ähnlich Zu Die AIC knallt aus
mit A K Protokoll In Typ Strafe Begriff eher als zwei mal k.
Dort war Auch andere Bedingungen In Die Integral Das Sind stets ignoriert.
Eins Ist K Protokoll 2 Pi, welche War berücksichtigt zu klein
Zu handeln mit Und Die andere eins
Ist A normalisiert Varianz von Die MLE, welche würde Auch Sei von Bestellung K.
ICH nicht Studie Die AIC oder BIC in beliebig Tiefe In Schule.
ICH Nur erinnern Hören Die Refrain AIC Überfit,
BIC unten passt mehrere mal In anders Klassen,
welche ICH interpretiert als A stark Skepsis um beide von ihnen.
Vergleichen Die AICc Und BIC-Strafen, Wir sehen Das Die AICc Wille verhindern
groß Modelle aus Sein gewählt Wann Die Probe Größe Ist klein,
wohingegen Die BIC Wille Trotzdem erlauben groß Modelle.
ICH sehen Die K Protokoll Und Normalisierung Konstante Strafe In Die BIC als etwas
weniger zwingend als Die Kreuzvalidierung Deutung von Die AIC- Typ Strafen.
Etwas Das führt
Zu A marginal Wahrscheinlichkeit von Die Daten Ist mehr abstrakt Zu Mich als etwas
Das Ist direkt interpretierbar als A Kreuzvalidierung metrisch
nehmen hinein Konto Parameter Unsicherheit.
Ich bin völlig bewusst
Das Ich bin redaktionell Hier, Aber Das Ist was ist hat funktioniert Also
für Mich Also weit.
Rückkehr Zu Die P DNA Damhirschkuh eins mehr Zeit.
Hier Sind Die Dasselbe Modelle fit In Die pDNA Beispiel
verwenden Die BIC zuerst Auswahl An Spitze Und Die AICc An Die unten.
Beachten Das Die BIC von Die voll normal Modell
Ist nicht als weit weg aus Die andere Modelle als mit Die AICc.
Der am besten Modell gesamt als bewertet von Die BIC Ist A logNormal,
Aber mit 13 Parameter Das Zeit um eher als neun.
Der nach vorne ausgewählt BIC normal Modell Auch hat A Paar mehr Parameter.
In klein Proben, Gegenteil Zu Die AIC Überfit,
BIC unten passt, Die AICc dürfen wählen kleiner Modelle als Die BIC In klein Proben.
Hier Wir sehen Die Auswirkungen gewählt von Die BIC und Die AICc.
Der Satz von BIC-ausgewählt Auswirkungen Ist A Obermenge von Die Einsen gewählt
von Die AICc.
A auch beachten, interessant, Das alle vier Auswirkungen nicht gewählt
von Die AICc Sind statistisch gesehen nach dem BIC von Bedeutung.
Unter Die BIC, Die pH-Quadrat Begriff Ist höchst bedeutsam,
Aber Es ist nicht gegenwärtig In Die AICc Modell, für Beispiel.
ICH würde sagen Das alle Die bedeutsam Auswirkungen
sollen haben Sternchen von ihnen,
Aber alle bedeutsam p-Werte haben Sternchen von ihnen in J Abgeordneter Berichte.
Stattdessen, Krank Nur sagen Das ICH nehmen p-Werte von Auswirkungen
nach Auswahl mit A Getreide von Salz.
Obwohl Die zwei Modelle wählen anders Auswirkungen,
manche von ihnen höchst statistisch gesehen bedeutsam In Die Modell.
Wenn Wir sehen bei Die Profil
oder Variable Bedeutung aus diese zwei Modelle,
Sie erzählen A sehr ähnlich Geschichte.
Füttern Rate Ist von weit Die am meisten wichtig
Und nach Das Die Bestellung Ist Die Dasselbe zwischen Die zwei Modelle.
Nur pH-Wert Auswirkungen 3% von Die Variation In Die Antwort Oberfläche unter Die BIC
am besten Modell Und ist nicht inbegriffen bei alle In Die AICc am besten Modell.
Das Ist A sehr klar Beispiel
von statistisch Bedeutung Und praktisch Relevanz
Sein zwei anders Dinge.
Dort Sind A viel von Meinungen aus Dort um Die AICc Und Die BIC.
Für Beispiel, Burnham Und Anderson
sagen Das beide Methoden Sind konsistent für Die Quasi- WAHR Modell als N geht
Zu Unendlichkeit.
Aber Dann Es gibt Andere Das sagen
Das Die BIC ist Die nur eins konsistent für Die Wahrheit.
Burnham Und Anderson sagen Das Du dürfen Satz hoch Simulationen Zu machen eins sehen Gut,
ändern Die Weg es ist Satz hoch A wenig bisschen Und es wird umdrehen Die Ergebnisse.
Burnham Und Anderson,
WHO Sind um Die am meisten Stirb langsam AICc Fans aus Dort In ihre Simulationen,
gefunden Das Die AICc wählt weniger Wirklich schlecht Modelle als Die BIC.
ICH denken es ist nicht A schlecht Idee Zu sehen bei beide BIC und AICc
nach bewirbt sich Variable Auswahl.
Wenn Die am besten Modelle unter beide Sind hübsch viel Die Dasselbe, welche Ist oft Die Fall,
Du dürfen fühlen hübsch Gut um entweder von ihnen, Wenn Sie sind anders
es ist Gut Zu denken um Die Gründe dafür Warum Und verwenden dein Thema Gegenstand Sachverstand
Zu helfen machen A Entscheidung.
Mein zuletzt Thema Ist Modell Auswahl Kriterien Und linear gemischt Modelle.
Das Ist A hübsch kompliziert Situation, besonders Weil Dort ist nicht Konsens
zwischen Software Anbieter In Wie Zu berechnen Die Modell Auswahl Kriterien.
Zu veranschaulichen Das, ICH erstellt A Teilt Handlung Design mit vier Faktoren.
Dort Sind zwei ganz Handlung Auswirkungen Und zwei Teilt Handlung Auswirkungen.
Wenn Du nehmen Die Dasselbe Daten Und fit Die Dasselbe Modell In JMP Profi
Und SAS verwenden fit gemischt Und proc gemischt,
Du Wille sehen Das Die Wahrscheinlichkeiten Und Modell Auswahl Kriterien nicht übereinstimmen,
Aber Die Varianz Schätzungen Tun, Du erhalten anders Fest Auswirkungen
Parameter Schätzungen, Aber Die Fest Auswirkungen Tests zustimmen.
Eins von Die Gründe dafür für Das Ist Das JMP Und SAS Fest Auswirkungen Design Matrizen
verwenden A anders Codierung Strategie für kategorisch Auswirkungen.
An Die links ICH haben Die JMP Design Matrix für Die Teilt Handlung Beispiel,
Und An Die Rechts Du sehen Die SAS eins.
JMP schafft A Reihe von Minus Einsen
für Die zuletzt Ebene von kategorisch Auswirkungen welche Ist gesehen In Blau Hier
wohingegen SAS schafft A Reihe von Nullen.
Weder eins von diese Ist Rechts oder falsch.
Es ist wie Ändern Einheiten oder Ändern Koordinate Systeme.
JMP kategorisch Auswirkungen Summe Zu null, wohingegen SAS kategorisch Auswirkungen
dürfen Sei interpretiert als Unterschiede aus Die zuletzt Ebene.
Obwohl Die roh Parameter Schätzungen abweichen,
Vorhersagen Wille Sei Die Dasselbe zwischen Die zwei Codierungen Weil Die Modelle
Sind grundsätzlich Äquivalent.
Am meisten Dinge Das Gegenstand
Gewohnheit Sei anders zwischen Die zwei Software Produkte.
Jedoch, REML, der Methode gebraucht Zu schätzen gemischt Auswirkungen Modelle
hat ein Mehrdeutigkeit In Es.
Der Base Gauß Wahrscheinlichkeit bei Die Spitze
Wille Sei Die Dasselbe In entweder Software Weil es ist A real Wahrscheinlichkeit.
Aber Die REML oder Restwert Wahrscheinlichkeit gemeldet von proc gemischt
Und JMP Profis fit gemischt ist nicht A real Wahrscheinlichkeit.
Wenn Es War A real Wahrscheinlichkeit, Dann Wir würde erhalten Die Dasselbe Werte
egal von welche Codierung oder Software Wir gebraucht.
Das Ist Weil Es gibt ein extra Strafe hinzugefügt Zu Die Gauß Wahrscheinlichkeit
für REML Das reduziert Die Voreingenommenheit von Die Varianz Schätzungen.
Aber Das kommt darauf an An Die Design Matrix
In A Weg Das Ist empfindlich Zu Die Codierung gebraucht.
JMP Berichte, Die roh Gauß Wahrscheinlichkeit, Und Die AICc Und BIC das Es Berichte
Sind basierend An Das eher als Die Restwert Wahrscheinlichkeit.
Der Nummer von Parameter fit gemischt zählt
Ist Die gesamt einschließlich beide Fest Auswirkungen Und Varianz Parameter.
Wir tat Es Das Weg Zu machen Es Also Das Du dürfen verwenden JMP Zu vergleichen Modelle
mit anders Fest- Wirkung Strukturen als Also als Varianz Modelle.
In SAS, Sie nur Bericht Die Restwert oder REML Log-Wahrscheinlichkeit
Und Es Berichte Modell Auswahl Kriterien basierend An Es.
Du dürfen sehen Hier Das Es Auch nur zählt Varianz Parameter als Also
Weil Die Unterschied zwischen Die SAS Wahrscheinlichkeit
Und es ist AIC Ist für implizieren zwei Parameter,
A Varianz Komponente Und A Restwert.
Alle Das bedeutet Ist Das
Du dürfen nur Verwenden Sie p roc gemischt für vergleichen Varianz Modelle
mit Die AIC Weil Die Modell Auswahl Kriterien
beinhaltet Die REML Strafe Und es ist nur Zählen Varianz Parameter.
Mit alle fällig respektieren,
ICH dürfen denken von manche Gut Gründe dafür für Die SAS Ansatz,
Und Dort Sind wahrscheinlich manche andere Gut Gründe dafür ICH nicht sogar wissen von.
Aber ICH persönlich bevorzugen Die Flexibilität gewährt von Die JMP Ansatz.
Zu zusammenfassen, Wenn Du vergleichen Ergebnisse über Software
für nicht- gemischt Modelle, Die bedeuten Parameter Schätzungen Mai abweichen,
Aber ansonsten alles anders sollen Sei Die Dasselbe.
Als lang als Die Software berechnet
Die Konstanten Und Die Wahrscheinlichkeit korrekt als JMP tut.
Wann Wir erhalten Zu Gauß gemischt Modelle,
Dort Sind sehr wichtig Software Unterschiede
Und Die Umfang von Die Entscheidungen Du dürfen machen um Die Modelle
verwenden Die Software Mai Sei sehr anders
abhängig An Die Einzelheiten von Wie es ist Wahrscheinlichkeit Ist berechnet.
JMP Modell Auswahl Kriterien
Sind vergleichbar beide innerhalb Die Dasselbe Plattform
Und über andere Modellieren Plattformen.
Krank schließen mit Das gleiten, welche gibt Mein Basic Empfehlungen
für bewirbt sich Die Werkzeuge besprochen Heute.
Hypothese testen Ist A Werkzeug für Wann Du brauchen Zu beweisen etwas
Und Ist am besten gebraucht In Situationen Wann Du haben A Gut Idee
von Die Modell Struktur In Vorauszahlung.
Wann du bist Arbeiten An A Problem In Industrie Und Die Probe Größe Ist klein,
ICH würde Stock Zu klassisch statistisch Modelle
Und verwenden Die AICc als Die primär Werkzeug für wählen zwischen ihnen.
Mit größer Daten Sätze, Wann ICH haben genug Daten Zu halten aus
bei am wenigsten A dritte von Die Beobachtungen, ICH verwenden aushalten Kreuzvalidierung Zu vergleichen
klassisch statistisch Modelle als Also als Maschine Lernen Modelle.
In Mein eigen arbeiten, ICH neigen Zu vermeiden K- falten Kreuzvalidierung
Und es ist Varianz.
Der Modell Auswahl Kriterien Sind Äquivalent Zu Es In größer Proben,
Und ICH neigen Zu Stock mit einfacher Modelle mit kleiner Daten Sätze.
ICH wissen Das nicht alle Ist gehen Zu zustimmen mit Mich An Das,
Aber Das Ist Was funktioniert für Mich Und Ist A hübsch sicher Weg
Zu Ansatz Modell Auswahl.
Wählen Die am meisten nützlich Modell aus A Satz von Alternativen Das muss alle Sei falsch
An manche Ebene Ist ein wichtig Entscheidung, Und diese Sind Die hauptsächlich Überlegungen
ICH haben Wann entscheiden auf A Modell Auswahl Strategie.
Dank Du für dein Aufmerksamkeit Und ICH sehen nach vorne Zu reden mit Du
In Die Treffen Die Experte Sitzungen.