Statistiken und Big Data

Fragen und Antworten für Personen, die sich für Statistik, maschinelles Lernen, Datenanalyse, Data Mining und Datenvisualisierung interessieren

2
Mittelwert der Bootstrap-Stichprobe vs. Statistik der Stichprobe
Angenommen, ich habe ein Beispiel und das Bootstrap-Beispiel aus diesem Beispiel für ein stastitisches (z. B. den Mittelwert). Wie wir alle wissen, schätzt dieses Bootstrap-Beispiel die Stichprobenverteilung des Schätzers der Statistik.χχ\chi Ist der Mittelwert dieser Bootstrap-Stichprobe eine bessere Schätzung der Bevölkerungsstatistik als die Statistik der ursprünglichen Stichprobe ? Unter welchen …
2
Warum
Eine Folge von Schätzern für einen Parameter θ ist asymptotisch normal, wenn √UnUnU_nθθ\theta. (Quelle) Wir nennen dannvdie asymptotische Varianz vonUn. Wenn diese Varianz gleich derCramer-Rao-Grenze ist, sagen wir, dass der Schätzer / die Sequenz asymptotisch effizient ist.n−−√(Un−θ)→N(0,v)n(Un−θ)→N(0,v)\sqrt{n}(U_n - \theta) \to N(0,v)vvvUnUnU_n Frage: Warum verwenden wir im Besonderen?n−−√n\sqrt{n} Ich weiß , …
1
Auswahl zwischen Verlustfunktionen für die binäre Klassifizierung
Ich arbeite in einem Problembereich, in dem häufig ROC-AUC oder AveP (Average Precision) gemeldet werden . Kürzlich habe ich jedoch Papiere gefunden, die stattdessen Log Loss optimieren , während andere über Hinge Loss berichten . Während ich verstehe, wie diese Metriken berechnet werden, fällt es mir schwer , die Kompromisse …
3
Sind Optimierungstechniken Stichprobenverfahren zugeordnet?
Aus jedem generischen Abtastalgorithmus kann ein Optimierungsalgorithmus abgeleitet werden. In der Tat genügt es, um eine beliebige Funktion zu maximieren , Abtastwerte aus g ∼ e f / T zu ziehen . Für klein genug ist, fallen diese Abtastwerte in die Nähe des globalen Maximums (oder der lokalen Maxima in …
3
Asymptotische Konsistenz mit asymptotischer Varianz ungleich Null - was bedeutet das?
Das Problem ist schon einmal aufgetaucht, aber ich möchte eine bestimmte Frage stellen, die versucht, eine Antwort zu finden, die es verdeutlicht (und klassifiziert): In "Poor Man's Asymptotics" wird klar unterschieden zwischen (a) eine Folge von Zufallsvariablen, die mit einer Wahrscheinlichkeit gegen eine Konstante konvergieren im gegensatz zu (b) eine …
4
Was ist die Intuition hinter der Unabhängigkeit von
Ich hatte gehofft, jemand könnte ein Argument vorschlagen, das erklärt, warum die Zufallsvariablen und , wobei die Standardnormalverteilung hat, statistisch unabhängig sind. Der Beweis für diese Tatsache ergibt sich leicht aus der MGF-Technik, aber ich finde sie äußerst kontraintuitiv.Y1=X2−X1Y1=X2−X1Y_1=X_2-X_1Y2=X1+X2Y2=X1+X2Y_2=X_1+X_2XiXiX_i Ich würde mich daher über die Intuition hier freuen, wenn überhaupt. …
2
Interpretation von Betas bei mehreren kategorialen Variablen
Ich verstehe das Konzept, dass der Mittelwert ist, wenn die kategoriale Variable gleich 0 ist (oder die Referenzgruppe ist), was die Endinterpretation ergibt, dass der Regressionskoeffizient die Differenz im Mittel der beiden Kategorien ist. Selbst bei> 2 Kategorien würde ich annehmen, dass jede den Unterschied zwischen dem Mittelwert dieser Kategorie …
3
Warum ist die Bayes'sche Statistik für die statistische Prozesskontrolle nicht beliebter?
Mein Verständnis der Debatte zwischen Bayesian und Frequentist ist folgende: ist (oder behauptet, objektiv zu sein) oder zumindest unvoreingenommen Verschiedene Forscher, die unterschiedliche Annahmen verwenden, können daher immer noch quantitativ vergleichbare Ergebnisse erzielen während Bayes'sche Statistik behauptet, "bessere" Vorhersagen zu treffen (dh den erwarteten Verlust zu senken), weil es Vorkenntnisse …
3
Negativ-Binomial-GLM vs. Log-Transformation für Zähldaten: erhöhte Typ-I-Fehlerrate
Einige von Ihnen haben vielleicht dieses schöne Papier gelesen: O'Hara RB, Kotze DJ (2010) Zählungsdaten nicht protokollieren und transformieren. Methoden in Ökologie und Evolution 1: 118–122. klick . In meinem Forschungsgebiet (Ökotoxikologie) beschäftigen wir uns mit schlecht replizierten Experimenten, und GLMs werden nicht häufig eingesetzt. Also habe ich eine ähnliche …
4
Nichttransitivität der Korrelation: Korrelationen zwischen Geschlecht und Gehirngröße sowie zwischen Gehirngröße und IQ, aber keine Korrelation zwischen Geschlecht und IQ
In einem Blog habe ich folgende Erklärung gefunden und möchte mehr über die Nicht-Transitivität der Korrelation erfahren: Wir haben die folgenden unbestreitbaren Tatsachen: Im Durchschnitt gibt es einen Unterschied im Gehirnvolumen zwischen Männern und Frauen Es gibt eine Korrelation zwischen dem IQ und der Gehirngröße. Die Korrelation beträgt 0,33 und …
Durch die Nutzung unserer Website bestätigen Sie, dass Sie unsere Cookie-Richtlinie und Datenschutzrichtlinie gelesen und verstanden haben.
Licensed under cc by-sa 3.0 with attribution required.