Statistiken und Big Data

27

Gibt es kostenlose statistische Lehrbücher?

119 teaching references

5

Was ist der Unterschied zwischen Normalisierung und Standardisierung?

Bei der Arbeit haben wir darüber gesprochen, da mein Chef noch nie von Normalisierung gehört hat. In der linearen Algebra scheint sich Normalisierung auf die Teilung eines Vektors durch seine Länge zu beziehen. Und in der Statistik scheint sich Standardisierung auf die Subtraktion eines Mittels zu beziehen, das dann durch …

118 descriptive-statistics normalization standardization

8

Bedeutet Kausalität Korrelation?

Korrelation impliziert keine Kausalität, da es viele Erklärungen für die Korrelation geben könnte. Aber impliziert Kausalität Korrelation? Intuitiv würde ich denken, dass das Vorhandensein von Kausalität zwangsläufig eine gewisse Korrelation bedeutet. Aber meine Intuition hat mir in der Statistik nicht immer gute Dienste geleistet. Bedeutet Kausalität Korrelation?

118 correlation causality

9

Wann kann der Achsenabschnitt in einem linearen Regressionsmodell entfernt werden?

Ich verwende lineare Regressionsmodelle und frage mich, unter welchen Bedingungen der Intercept-Term entfernt werden kann. Beim Vergleich der Ergebnisse von zwei verschiedenen Regressionen, bei denen die eine den Achsenabschnitt hat und die andere nicht, stelle ich fest, dass das der Funktion ohne den Achsenabschnitt viel höher ist. Gibt es bestimmte …

118 regression linear-model r-squared intercept

9

Numerisches Beispiel zum Verständnis von Expectation-Maximization

Ich versuche, einen guten Überblick über den EM-Algorithmus zu bekommen, um ihn implementieren und verwenden zu können. Ich verbrachte einen ganzen Tag damit, die Theorie und ein Papier zu lesen, in dem EM verwendet wird, um ein Flugzeug unter Verwendung der Positionsinformationen, die von einem Radar kommen, zu verfolgen. Ehrlich …

117 regression probability mathematical-statistics intuition expectation-maximization

21

Was ist der Unterschied zwischen Wahrscheinlichkeit und Statistik?

Was ist der Unterschied zwischen Wahrscheinlichkeit und Statistik und warum werden sie gemeinsam untersucht?

116 probability teaching mathematical-statistics

6

Warum sind p-Werte unter der Nullhypothese gleichmäßig verteilt?

Kürzlich habe ich in einer Arbeit von Klammer et al. eine Aussage, dass p-Werte gleichmäßig verteilt sein sollten. Ich glaube den Autoren, kann aber nicht verstehen, warum es so ist. Klammer, AA, Park, CY und Stafford Noble, W. (2009) Statistische Kalibrierung der SEQUEST XCorr-Funktion . Journal of Proteome Research . …

115 p-value uniform

16

Wenn 900 von 1000 Menschen sagen, dass ein Auto blau ist, wie hoch ist die Wahrscheinlichkeit, dass es blau ist?

Dies entstand ursprünglich im Zusammenhang mit einigen Arbeiten, die wir an einem Modell zur Klassifizierung von natürlichem Text durchführen, aber ich habe es vereinfacht ... Vielleicht zu viel. Sie haben ein blaues Auto (nach objektiven wissenschaftlichen Maßstäben - es ist blau). Sie zeigen es 1000 Menschen. 900 sagen, es ist …

114 probability

3

Wie werden die Standardfehler von Koeffizienten in einer Regression berechnet?

Nach meinem eigenen Verständnis bin ich daran interessiert, die Berechnung der Standardfehler der geschätzten Koeffizienten manuell zu wiederholen, da sie beispielsweise mit der Ausgabe der lm()Funktion einhergehen R, diese aber nicht festhalten können. Was ist die Formel / Implementierung verwendet?

114 r regression standard-error lm

2

Ableiten der bedingten Verteilungen einer multivariaten Normalverteilung

Wir haben einen multivariaten normalen Vektor . Partitionieren Sie und in Y∼N(μ,Σ)Y∼N(μ,Σ){\boldsymbol Y} \sim \mathcal{N}(\boldsymbol\mu, \Sigma)μμ\boldsymbol\muYY{\boldsymbol Y}μ=[μ1μ2]μ=[μ1μ2]\boldsymbol\mu = \begin{bmatrix} \boldsymbol\mu_1 \\ \boldsymbol\mu_2 \end{bmatrix} Y=[y1y2]Y=[y1y2]{\boldsymbol Y}=\begin{bmatrix}{\boldsymbol y}_1 \\ {\boldsymbol y}_2 \end{bmatrix} mit einer ähnlichen Partition von in Dann , die bedingte Verteilung der ersten Partition bei der zweiten, ist mit mittlerer …

114 normal-distribution conditional-probability

10

Was ist der Unterschied zwischen einem neuronalen Netzwerk und einem tiefen neuronalen Netzwerk und warum funktionieren die tiefen besser?

Ich habe die Frage nicht genau in diesen Begriffen gesehen, und aus diesem Grund stelle ich eine neue Frage. Was mich interessiert, ist nicht die Definition eines neuronalen Netzwerks, sondern das Verstehen des tatsächlichen Unterschieds zu einem tiefen neuronalen Netzwerk. Für mehr Kontext: Ich weiß, was ein neuronales Netzwerk ist …

114 neural-networks deep-learning

4

Pearson- oder Spearman-Korrelation mit nicht normalen Daten

Ich bekomme diese Frage häufig genug in meiner Statistikberatung, so dass ich dachte, ich würde sie hier posten. Ich habe eine Antwort, die unten steht, aber ich war gespannt, was andere zu sagen haben. Frage: Wenn Sie zwei Variablen haben, die nicht normal verteilt sind, sollten Sie Spearmans Rho für …

113 correlation normality-assumption pearson-r spearman-rho

13

Was stimmt nicht mit dem Comic "Frequentists vs. Bayesians" von XKCD?

Dieser xkcd-Comic (Frequentists vs. Bayesians) macht sich über einen Frequentist-Statistiker lustig, der ein offensichtlich falsches Ergebnis erzielt. Es scheint mir jedoch, dass seine Argumentation tatsächlich in dem Sinne richtig ist, dass sie der gängigen frequentistischen Methodik folgt. Meine Frage lautet also: "Wendet er die frequentistische Methodik korrekt an?" Wenn nein: …

113 bayesian frequentist

1

Wie kann man PCA umkehren und Originalvariablen aus mehreren Hauptkomponenten rekonstruieren?

Die Hauptkomponentenanalyse (PCA) kann zur Dimensionsreduzierung verwendet werden. Wie kann man nach einer solchen Dimensionsreduktion die ursprünglichen Variablen / Merkmale aus einer kleinen Anzahl von Hauptkomponenten näherungsweise rekonstruieren? Wie kann man alternativ mehrere Hauptkomponenten aus den Daten entfernen oder verwerfen? Mit anderen Worten, wie PCA umkehren? Angesichts der Tatsache, dass …

113 pca dimensionality-reduction svd

19

Die interessantesten statistischen Paradoxien

Weil ich sie faszinierend finde, würde ich gerne hören, was die Leute in dieser Community als das interessanteste statistische Paradoxon ansehen und warum.

112 paradox