Statistiken und Big Data

2

Verwendung von lm für einen 2-Proben-Proportional-Test

Ich verwende seit einiger Zeit lineare Modelle, um 2-Stichproben-Proportionen-Tests durchzuführen, habe jedoch festgestellt, dass dies möglicherweise nicht vollständig korrekt ist. Es scheint, dass die Verwendung eines verallgemeinerten linearen Modells mit einer Binomialfamilie + Identitätsverknüpfung genau die ungepoolten 2-Stichproben-Proportionen-Testergebnisse liefert. Die Verwendung eines linearen Modells (oder Glm mit Gaußscher Familie) ergibt …

12 r hypothesis-testing generalized-linear-model proportion

1

Intuition für die Freiheitsgrade des LASSO

Zou u.a. "Auf den" Freiheitsgraden "des Lassos" (2007) zeigen, dass die Anzahl der Koeffizienten ungleich Null eine unvoreingenommene und konsistente Schätzung für die Freiheitsgrade des Lassos ist. Es scheint mir ein wenig eingängig zu sein. Angenommen, wir haben ein Regressionsmodell (wobei die Variablen den Mittelwert Null haben). y=βx+ε.y=βx+ε.y=\beta x + …

12 regression lasso degrees-of-freedom shrinkage

1

Wie kann man feststellen, ob eine Lernkurve aus dem SVM-Modell eine Verzerrung oder Varianz aufweist?

Ich habe diese Lernkurve erstellt und möchte wissen, ob mein SVM-Modell unter Voreingenommenheit oder Varianz leidet. Wie kann ich das aus dieser Grafik schließen?

12 machine-learning svm bias train

4

Blackwells Wette

Ich habe über Blackwells Wettparadoxon im Futility-Schrank gelesen . Hier ist die Zusammenfassung: Sie erhalten zwei Umschläge, und . Die Umschläge enthalten einen zufälligen Geldbetrag, aber Sie wissen nichts über die Verteilung des Geldes. Sie öffnen eine, prüfen, wie viel Geld sich dort befindet ( ) und müssen wählen: Nehmen …

12 probability paradox

6

Brexit: War "Urlaub" statistisch signifikant? [geschlossen]

Geschlossen . Diese Frage ist meinungsbasiert . Derzeit werden keine Antworten akzeptiert. Möchten Sie diese Frage verbessern? Aktualisieren Sie die Frage, damit sie mit Fakten und Zitaten beantwortet werden kann, indem Sie diesen Beitrag bearbeiten . Geschlossen vor 3 Jahren . In diesem Beitrag stellen wir eine Frage zu einem …

12 statistical-significance voting-system

2

Wahre Bedeutung der Vertrauensellipse

Wenn ich über die wahre Bedeutung der 95% igen Vertrauensellipse lese, finde ich in der Regel zwei Erklärungen: Die Ellipse, die 95% der Daten enthält Nicht das Obige, sondern die Ellipse, die die Varianz der Daten erklärt. Ich bin nicht sicher, ob ich das richtig verstehe, aber sie scheinen zu …

12 confidence-interval ellipse

3

Ist die Summe einer diskreten und einer stetigen Zufallsvariablen stetig oder gemischt?

Wenn XXX eine diskrete und YYY eine kontinuierliche Zufallsvariable ist, was können wir dann über die Verteilung von sagen X+YX+YX+Y? Ist es kontinuierlich oder ist es gemischt? Was ist mit dem Produkt XYXYXY ?

12 self-study distributions random-variable

2

Welcher Teil der Wiederholungsexperimente hat eine Effektgröße innerhalb des 95% -Konfidenzintervalls des ersten Experiments?

Bleiben wir bei einer idealen Situation mit Zufallsstichproben, Gaußschen Populationen, gleichen Varianzen, keinem P-Hacking usw. Schritt 1. Sie führen ein Experiment durch, indem Sie beispielsweise zwei Stichprobenmittelwerte vergleichen und ein 95% -Konfidenzintervall für die Differenz zwischen den beiden Populationsmitteln berechnen. Schritt 2. Sie führen viel mehr Experimente durch (Tausende). Der …

12 confidence-interval replicability

3

Was ist ein Beispiel für perfekte Multikollinearität?

Was ist ein Beispiel für perfekte Kollinearität in Bezug auf die Entwurfsmatrix ?XXX Ich hätte gerne ein Beispiel, in dem nicht geschätzt werden kann, weil nicht invertierbar ist.β^=(X′X)−1X′Yβ^=(X′X)−1X′Y\hat \beta = (X'X)^{-1}X'Y(X′X)(X′X)(X'X)

12 regression multicollinearity matrix matrix-inverse

1

Wie berechnet sich das Konfidenzintervall für die ACF-Funktion?

Wenn Sie beispielsweise die acf()Funktion in R aufrufen , zeichnet sie standardmäßig ein Korrelogramm und zeichnet ein Konfidenzintervall von 95%. Wenn Sie den Code betrachten und anrufen plot(acf_object, ci.type="white"), sehen Sie: qnorm((1 + ci)/2)/sqrt(x$n.used) als obere Grenze für Typ Weißes Rauschen. Kann jemand die Theorie hinter dieser Methode erklären? Warum …

12 r confidence-interval autocorrelation

4

Wie kann die Lernrate mit Gradient Descent als Optimierer (systematisch) eingestellt werden?

Ein Außenseiter des ML / DL-Bereichs; hat den Udacity Deep Learning Kurs begonnen, der auf Tensorflow basiert; Aufgabe 3 erledigen Aufgabe 4; versuchen, die Lernrate mit der folgenden Konfiguration zu optimieren: Losgröße 128 Anzahl der Schritte: genug, um 2 Epochen zu füllen Größen der versteckten Schichten: 1024, 305, 75 Gewichtsinitialisierung: …

12 python machine-learning tensorflow deep-learning

1

Variablenauswahl vs Modellauswahl

Ich verstehe also, dass die Variablenauswahl Teil der Modellauswahl ist. Woraus besteht die Modellauswahl genau? Ist es mehr als das Folgende: 1) Wählen Sie eine Distribution für Ihr Modell 2) erklärende Variablen wählen,? Ich frage dies, weil ich einen Artikel von Burnham & Anderson lese : AIC vs BIC, in …

12 feature-selection model-selection aic bic

2

ICC als erwartete Korrelation zwischen zwei zufällig gezogenen Einheiten, die sich in derselben Gruppe befinden

Bei der mehrstufigen Modellierung wird die Intraclass-Korrelation häufig aus einer ANOVA mit Zufallseffekten berechnet yich j= γ00+ uj+ eich jyichj=γ00+uj+eichj y_{ij} = \gamma_{00} + u_j + e_{ij} Dabei sind die Residuen der Ebene 2 und die Residuen der Ebene 1. Dann erhalten wir Schätzungen, und für die Varianz von und …

12 correlation mixed-model intraclass-correlation

1

Wird es jemals einen unglücklichen Tribble in Oz geben?

Hier ist ein amüsantes Problem, das mir ein Student gebracht hat. Obwohl es ursprünglich so formuliert war, dass Kugeln, die von einer Waffe in regelmäßigen Abständen abgefeuert wurden, sich gegenseitig vernichtet haben, dachte ich, Sie könnten eine friedlichere Präsentation genießen. In der unendlichen flachen Welt von Oz beginnt die Yellow …

12 probability stochastic-processes puzzle

4

Ermitteln Sie die Anzahl der Spitzen bei der Audioaufnahme

Ich versuche herauszufinden, wie man die Anzahl der Silben in einem Korpus von Audioaufnahmen erkennt. Ich denke, ein guter Proxy könnte Peaks in der Wave-Datei sein. Hier ist, was ich mit einer Datei versucht habe, in der ich Englisch spreche (mein aktueller Anwendungsfall ist Kiswahili). Das Protokoll dieser Beispielaufnahme lautet: …

12 r signal-processing