Statistiken und Big Data sampling

1

Generieren von Zufallsstichproben aus einer benutzerdefinierten Verteilung

Ich versuche, Zufallsstichproben aus einem benutzerdefinierten PDF mit R zu generieren. Mein PDF lautet: fX( x ) = 32( 1 - x2) , 0 ≤ x ≤ 1fX(x)=32(1-x2),0≤x≤1f_{X}(x) = \frac{3}{2} (1-x^2), 0 \le x \le 1 Ich habe einheitliche Samples generiert und dann versucht, diese in meine benutzerdefinierte Distribution umzuwandeln. …

16 r sampling uniform

1

Was ist die Intuition hinter austauschbaren Proben unter der Nullhypothese?

Permutationstests (auch Randomisierungstest, Re-Randomisierungstest oder exakter Test genannt) sind sehr nützlich und nützlich, wenn die zum Beispiel erforderliche Annahme einer Normalverteilung t-testnicht erfüllt ist und wenn die Transformation der Werte durch Rangfolge der Werte erfolgt Ein nicht parametrischer Test Mann-Whitney-U-testwürde dazu führen, dass mehr Informationen verloren gehen. Eine einzige Annahme, …

15 hypothesis-testing permutation-test exchangeability r statistical-significance loess data-visualization normal-distribution pdf ggplot2 kernel-smoothing probability self-study expected-value normal-distribution prior correlation time-series regression heteroscedasticity estimation estimators fisher-information data-visualization repeated-measures binary-data panel-data mathematical-statistics coefficient-of-variation normal-distribution order-statistics regression machine-learning one-class probability estimators forecasting prediction validation finance measurement-error variance mean spatial monte-carlo data-visualization boxplot sampling uniform chi-squared goodness-of-fit probability mixture theory gaussian-mixture regression statistical-significance p-value bootstrap regression multicollinearity correlation r poisson-distribution survival regression categorical-data ordinal-data ordered-logit regression interaction time-series machine-learning forecasting cross-validation binomial multiple-comparisons simulation false-discovery-rate r clustering frequency wilcoxon-mann-whitney wilcoxon-signed-rank r svm t-test missing-data excel r numerical-integration r random-variable lme4-nlme mixed-model weighted-regression power-law errors-in-variables machine-learning classification entropy information-theory mutual-information

1

Unterschied zwischen Randomisierungstest und Permutationstest

In der Literatur werden die Begriffe Randomisierung und Permutation synonym verwendet. Bei vielen Autoren, die "Permutationstests (auch als Randomisierungstests bezeichnet)" oder umgekehrt angeben. Bestenfalls glaube ich, dass der Unterschied subtil ist und in ihren Annahmen über die Daten und möglichen Schlussfolgerungen liegt, die gezogen werden können. Ich muss nur überprüfen, …

15 hypothesis-testing sampling terminology permutation-test

5

Wie entspricht die Stichprobenverteilung der Stichprobenmittelwerte dem Bevölkerungsmittelwert?

Ich versuche, Statistiken zu lernen, weil ich feststelle, dass sie so verbreitet sind, dass ich einige Dinge nicht lernen kann, wenn ich sie nicht richtig verstehe. Ich habe Probleme, diesen Begriff einer Stichprobenverteilung der Stichprobenmittel zu verstehen. Ich kann nicht verstehen, wie es einige Bücher und Websites erklärt haben. Ich …

15 distributions normal-distribution sampling normality-assumption

3

Wie kann ich anhand einer zufälligen Datenstichprobe die Anzahl der eindeutigen Vorkommen abschätzen?

Angenommen, ich habe eine große Menge von Werten, die sich manchmal wiederholen. Ich möchte die Gesamtzahl der eindeutigen Werte in der großen Menge schätzen .SSS Wenn ich eine zufällige Stichprobe von nehme - Werte und bestimmen , dass es enthält T u eindeutige Werte, kann ich dies die Anzahl der …

15 estimation sampling

2

Was sind einige Techniken zum Abtasten von zwei korrelierten Zufallsvariablen?

Was sind einige Techniken zum Abtasten von zwei korrelierten Zufallsvariablen: wenn ihre Wahrscheinlichkeitsverteilungen parametrisiert sind (zB log-normal) wenn sie nicht parametrische Verteilungen haben. Die Daten sind zwei Zeitreihen, für die wir Korrelationskoeffizienten ungleich Null berechnen können. Wir möchten diese Daten in Zukunft simulieren, vorausgesetzt, die historische Korrelation und die Zeitreihen-CDF …

15 correlation sampling monte-carlo stochastic-processes copula

2

Kann ich Momente einer Distribution verwenden, um die Distribution abzutasten?

Ich stelle fest, dass bei Statistiken / Methoden des maschinellen Lernens eine Verteilung häufig durch einen Gaußschen Wert angenähert wird und dann der Gaußsche Wert für die Stichprobe verwendet wird. Sie beginnen mit der Berechnung der ersten beiden Momente der Verteilung und verwenden diese, um μμ\mu und σ2σ2\sigma^2 zu schätzen …

14 probability sampling moments

2

Sampling aus der von Mises-Fisher-Distribution in Python?

Ich suche nach einer einfachen Möglichkeit, eine multivariate von Mises-Fisher-Distribution in Python abzutasten. Ich habe im Statistikmodul in Scipy und im Numpy-Modul nachgesehen, aber nur die univariate von Mises-Verteilung gefunden. Gibt es einen Code zur Verfügung? Habe ich noch nicht gefunden. Anscheinend hat Wood (1994) einen Algorithmus zum Abtasten von …

14 distributions sampling python

2

Am besten empfohlene Lehrbücher zum Bootstrap-Resampling?

Ich wollte nur fragen, welche Ihrer Meinung nach die besten verfügbaren Bücher über Bootstrap da draußen sind. Damit meine ich nicht unbedingt nur das, was die Entwickler geschrieben haben. Könnten Sie bitte angeben, welches Lehrbuch für Sie das beste für Bootstrap ist, das die folgenden Kriterien abdeckt? Die philosophische / …

14 sampling model-selection bootstrap references resampling

1

Wie zeichnet man Zufallsstichproben aus einer nicht parametrisch geschätzten Verteilung?

Ich habe eine Stichprobe von 100 Punkten, die kontinuierlich und eindimensional sind. Ich habe seine nicht-parametrische Dichte mit Hilfe von Kernel-Methoden geschätzt. Wie kann ich Zufallsstichproben aus dieser geschätzten Verteilung ziehen?

14 r sampling kernel-smoothing

2

Was ist der Unterschied zwischen Stichprobenvarianz und Stichprobenvarianz?

Was ist der Unterschied zwischen Stichprobenvarianz und Stichprobenvarianz? Sie scheinen gleich zu sein. Sind sie nicht

14 sampling variance sample

2

Verwalten von Fehlern mit GPS-Routen (theoretischer Rahmen?)

Ich suche nach einem geeigneten theoretischen Rahmen oder Fachgebiet, um zu verstehen, wie ich mit den Fehlern des GPS-Systems umgehen kann - insbesondere beim Umgang mit Routen. Grundsätzlich suche ich nach den Anforderungen an die Daten und die zu verwendenden Algorithmen, um die Länge eines Trails bestimmen zu können. Die …

14 error sampling

1

Caret glmnet vs cv.glmnet

Es scheint eine Menge Verwirrung im Vergleich zwischen der Verwendung von glmnetinside caretzur Suche nach einem optimalen Lambda und der Verwendung cv.glmnetderselben Aufgabe zu geben. Viele Fragen wurden gestellt, zB: Klassifizierungsmodell train.glmnet vs. cv.glmnet? Was ist der richtige Weg, um glmnet mit caret zu verwenden? Quervalidierung von "glmnet" mit "caret" …

14 r caret glmnet machine-learning neural-networks maximum softmax probability distributions mathematical-statistics random-variable cdf statistical-significance variance expected-value ratio sample-size reliability tolerance-interval wilcoxon-signed-rank self-study variance sampling mean machine-learning svm libsvm self-study sampling ranks data-visualization histogram machine-learning classification normal-distribution mathematical-statistics maximum-likelihood mixture predictive-models prediction seasonality

3

Warum soll / soll (?) Die statistische Erhebung für die Politik funktionieren (zB Gallup)?

Umfragen (sagen wir Gallup) haben eine absurd niedrige Anzahl von Menschen im Vergleich zur Bevölkerungszahl ergeben (z. B. vielleicht tausend von Hunderten von Millionen Menschen). Für mich ist die Auswahl einer Population als Mittel zur Schätzung der Bevölkerungsstatistik sinnvoll, wenn Sie einen starken Grund zu der Annahme haben, dass die …

14 sampling sample-size

3

Warum ist Bootstrapping sinnvoll?

Wenn Sie lediglich eine erneute Stichprobe aus der empirischen Verteilung ziehen, warum nicht einfach die empirische Verteilung studieren? Warum nicht einfach die Variabilität aus der empirischen Verteilung quantifizieren, anstatt die Variabilität durch wiederholte Probenahme zu untersuchen?

13 machine-learning mathematical-statistics sampling bootstrap resampling

Als «sampling» getaggte Fragen