Statistiken und Big Data sampling

12

Warum impliziert ein 95% Konfidenzintervall (CI) keine 95% ige Chance, den Mittelwert zu enthalten?

Es scheint, dass aufgrund verschiedener verwandter Fragen hier Konsens besteht, dass der "95%" -Teil des von uns als "95% -Konfidenzintervall" bezeichneten Teils darauf verweist, dass wir unsere Stichproben- und CI-Berechnungsverfahren viele Male exakt replizieren müssten 95% der so berechneten CIs würden den Populationsmittelwert enthalten. Es scheint auch der Konsens zu …

228 probability confidence-interval sampling mean population

5

Zentraler Grenzwertsatz für Stichprobenmediane

Wenn ich den Median einer ausreichend großen Anzahl von Beobachtungen aus derselben Verteilung berechne, gibt der zentrale Grenzwertsatz dann an, dass die Verteilung der Mediane einer Normalverteilung nahekommt? Ich verstehe, dass dies mit den Mitteln einer großen Anzahl von Proben zutrifft, aber gilt dies auch für Mediane? Wenn nicht, wie …

54 normal-distribution mathematical-statistics sampling median central-limit-theorem

8

Ist Stichproben in Zeiten von Big Data relevant?

Oder eher "wird es sein"? Big Data macht Statistiken und relevantes Wissen umso wichtiger, scheint aber die Stichprobentheorie zu unterschätzen. Ich habe diesen Hype um 'Big Data' gesehen und frage mich, warum ich alles analysieren möchte . Gab es nicht einen Grund, warum "Sampling Theory" entworfen / implementiert / erfunden …

54 sampling data-mining large-data

5

Statistischer Rückschluss, wenn die Stichprobe die Grundgesamtheit ist

Stellen Sie sich vor, Sie müssen über die Anzahl der Kandidaten berichten, die jährlich einen bestimmten Test ablegen. Es scheint ziemlich schwierig zu sein, den beobachteten Prozentsatz des Erfolgs beispielsweise bei einer breiteren Population zu bestimmen, da die Zielpopulation spezifisch ist. Sie können also davon ausgehen, dass diese Daten die …

47 hypothesis-testing population sampling

4

Wie wird mit einer herkömmlichen Programmiersprache aus einer Normalverteilung mit bekanntem Mittelwert und bekannter Varianz eine Stichprobe erstellt?

Ich hatte noch nie einen Statistikkurs und hoffe, dass ich hier an der richtigen Stelle nachfragen kann. Angenommen, ich habe nur zwei Daten, die eine Normalverteilung beschreiben: den Mittelwert μμ\mu und die Varianz σ2σ2\sigma^2 . Ich möchte einen Computer verwenden, um zufällig eine Stichprobe aus dieser Distribution zu ziehen, sodass …

36 normal-distribution sampling computing

5

Warum verringert das Erhöhen der Stichprobengröße die (Stichproben-) Varianz?

Großes Bild: Ich versuche zu verstehen, wie das Erhöhen der Stichprobengröße die Leistung eines Experiments erhöht. Die Folien meines Dozenten erläutern dies mit einem Bild von 2 Normalverteilungen, eine für die Nullhypothese und eine für die Alternativhypothese und einer Entscheidungsschwelle c dazwischen. Sie argumentieren, dass eine zunehmende Stichprobengröße die Varianz …

35 variance sampling power

5

Ist eine Sample-Kovarianzmatrix immer symmetrisch und eindeutig positiv?

Wird dann bei der Berechnung der Kovarianzmatrix einer Stichprobe garantiert eine symmetrische und positiv definierte Matrix erhalten? Derzeit hat mein Problem eine Stichprobe von 4600 Beobachtungsvektoren und 24 Dimensionen.

33 sampling covariance

5

Warum haben politische Umfragen so große Stichproben?

Als ich mir die Nachrichten ansehe, habe ich bemerkt, dass die Gallup-Umfragen für Dinge wie Präsidentschaftswahlen Stichprobengrößen von weit über 1.000 haben. Soweit ich mich an College-Statistiken erinnere, war eine Stichprobengröße von 30 eine "signifikant große" Stichprobe. Es wurde der Anschein erweckt, dass eine Stichprobengröße über 30 aufgrund sinkender Renditen …

32 sampling sample-size power-analysis

5

Strategien zum Unterrichten der Stichprobenverteilung

The tl; dr version Welche erfolgreichen Strategien setzen Sie ein, um die Stichprobenverteilung (z. B. eines Stichprobenmittelwerts) in einem Grundstudium zu vermitteln? Der Hintergrund Im September unterrichte ich einen Einführungskurs in Statistik für Studierende der Sozialwissenschaften (hauptsächlich Politikwissenschaft und Soziologie) im zweiten Studienjahr unter Verwendung der grundlegenden Statistikpraxis von David …

30 distributions sampling teaching

3

R: Zufällige Gesamtstruktur, die NaN / Inf im Fehler "fremder Funktionsaufruf" trotz fehlender NaNs im Datensatz auslöst [geschlossen]

Ich verwende Caret, um eine kreuzvalidierte zufällige Gesamtstruktur über ein Dataset auszuführen. Die Y-Variable ist ein Faktor. In meinem Datensatz befinden sich keine NaNs, Infs oder NAs. Allerdings bekomme ich, wenn ich den zufälligen Wald laufen lasse Error in randomForest.default(m, y, ...) : NA/NaN/Inf in foreign function call (arg 1) …

29 r random-forest caret regression prediction fitting social-science poisson-distribution distributions characteristic-function bayesian prior regression normal-distribution interaction nonparametric skewness svm standard-deviation standard-error regression-coefficients igraph natural-language word2vec word-embeddings regression machine-learning sampling r regression machine-learning random-forest ensemble sampling unbiased-estimator proof estimators mse probability conditional-probability bayes anova missing-data neural-networks recommender-system r confidence-interval sample multiple-imputation r time-series forecasting mase

7

Wie heißt der statistische Irrtum, bei dem die Ergebnisse früherer Münzwürfe die Überzeugungen über nachfolgende Münzwürfe beeinflussen?

Wie wir alle wissen, wenn Sie eine Münze werfen, die die gleiche Chance hat, Köpfe wie Schwänze zu landen, dann werfen Sie die Münze oft, die Hälfte der Zeit bekommen Sie Köpfe und die Hälfte der Zeit bekommen Sie Schwänze. Als sie dies mit einem Freund besprachen, sagten sie, dass, …

28 probability distributions sampling

3

Was bedeutet "unabhängige Beobachtung"?

Ich versuche zu verstehen, was die Annahme unabhängiger Beobachtungen bedeutet. Einige Definitionen sind: "Zwei Ereignisse sind genau dann unabhängig, wenn ." ( Statistisches Wörterbuch )P(a∩b)=P(a)∗P(b)P(a∩b)=P(a)∗P(b)P(a \cap b) = P(a) * P(b) "Das Eintreten eines Ereignisses ändert nicht die Wahrscheinlichkeit für ein anderes" ( Wikipedia ). "Die Auswahl einer Beobachtung hat …

28 probability sampling multilevel-analysis independence assumptions

3

Was ist, wenn Ihre Zufallsstichprobe eindeutig nicht repräsentativ ist?

Was ist, wenn Sie eine Zufallsstichprobe entnehmen und feststellen, dass diese eindeutig nicht repräsentativ ist, wie in einer aktuellen Frage . Was ist zum Beispiel, wenn die Populationsverteilung bei 0 symmetrisch sein soll und die Stichprobe, die Sie zufällig ziehen, ungleiche positive und negative Beobachtungen aufweist und die Ungleichheit statistisch …

28 sampling experiment-design inference sample

1

Berechnung der Wiederholbarkeit von Effekten aus einem früheren Modell

Ich bin gerade auf diese Arbeit gestoßen , in der beschrieben wird, wie die Wiederholbarkeit (auch bekannt als Zuverlässigkeit, auch bekannt als Intraclass-Korrelation) einer Messung über Mixed-Effects-Modellierung berechnet wird. Der R-Code wäre: #fit the model fit = lmer(dv~(1|unit),data=my_data) #obtain the variance estimates vc = VarCorr(fit) residual_var = attr(vc,'sc')^2 intercept_var = …

28 mixed-model reliability intraclass-correlation repeatability spss factor-analysis survey modeling cross-validation error curve-fitting mediation correlation clustering sampling machine-learning probability classification metric r project-management optimization svm python dataset quality-control checking clustering distributions anova factor-analysis exponential poisson-distribution generalized-linear-model deviance machine-learning k-nearest-neighbour r hypothesis-testing t-test r variance levenes-test bayesian software bayesian-network regression repeated-measures least-squares change-scores variance chi-squared variance nonlinear-regression regression-coefficients multiple-comparisons p-value r statistical-significance excel sampling sample r distributions interpretation goodness-of-fit normality-assumption probability self-study distributions references theory time-series clustering econometrics binomial hypothesis-testing variance t-test paired-comparisons statistical-significance ab-test r references hypothesis-testing t-test normality-assumption wilcoxon-mann-whitney central-limit-theorem t-test data-visualization interactive-visualization goodness-of-fit

1

Können Freiheitsgrade eine nicht ganzzahlige Zahl sein?

Wenn ich GAM verwende, erhalte ich einen DF-Rest von (letzte Zeile im Code). Was bedeutet das? Über das GAM-Beispiel hinausgehend: Kann die Anzahl der Freiheitsgrade im Allgemeinen eine nicht ganzzahlige Zahl sein?26.626.626.6 > library(gam) > summary(gam(mpg~lo(wt),data=mtcars)) Call: gam(formula = mpg ~ lo(wt), data = mtcars) Deviance Residuals: Min 1Q Median …

27 r degrees-of-freedom gam machine-learning pca lasso probability self-study bootstrap expected-value regression machine-learning linear-model probability simulation random-generation machine-learning distributions svm libsvm classification pca multivariate-analysis feature-selection archaeology r regression dataset simulation r regression time-series forecasting predictive-models r mean sem lavaan machine-learning regularization regression conv-neural-network convolution classification deep-learning conv-neural-network regression categorical-data econometrics r confirmatory-factor scale-invariance self-study unbiased-estimator mse regression residuals sampling random-variable sample probability random-variable convergence r survival weibull references autocorrelation hypothesis-testing distributions correlation regression statistical-significance regression-coefficients univariate categorical-data chi-squared regression machine-learning multiple-regression categorical-data linear-model pca factor-analysis factor-rotation classification scikit-learn logistic p-value regression panel-data multilevel-analysis variance bootstrap bias probability r distributions interquartile time-series hypothesis-testing normal-distribution normality-assumption kurtosis arima panel-data stata clustered-standard-errors machine-learning optimization lasso multivariate-analysis ancova machine-learning cross-validation

Als «sampling» getaggte Fragen