Statistiken und Big Data

1

Umgang mit großen Datenmengen in R - Tutorials, Best Practices usw.

Ich bin ein R-Noob, der verschiedene Arten von Analysen für große Datenmengen in R durchführen muss. Als ich mich auf dieser Site und anderswo umsah, schien es mir, dass es hier viele esoterische und weniger bekannte Probleme gibt - wie zum Beispiel Welches Paket soll wann verwendet werden, welche Transformationen …

11 r large-data

1

Wie führe ich eine 4 x 4 gemischte ANOVA mit Kontrasten zwischen und innerhalb von Subjekten mit R durch?

Anfänger Benutzer von R hier kämpfen mit einer ANOVA mit wiederholten Messungen. Ich habe einen Datensatz, der aus einem Faktor zwischen Subjekten mit 4 Ebenen (codiert in einer einzelnen Variablen namens "Gruppen") und einem Faktor innerhalb von Probanden mit 4 Ebenen (codiert in vier separaten Variablen "DV1", "DV2", "DV3") besteht …

11 r anova repeated-measures contrasts

2

MCMC-Stichprobe des Entscheidungsbaumraums im Vergleich zur zufälligen Gesamtstruktur

Eine zufällige Gesamtstruktur ist eine Sammlung von Entscheidungsbäumen, die gebildet werden, indem nur bestimmte Merkmale zufällig ausgewählt werden, mit denen jeder Baum erstellt werden soll (und manchmal die Trainingsdaten eingesackt werden). Anscheinend lernen und verallgemeinern sie gut. Hat jemand eine MCMC-Stichprobe des Entscheidungsbaumraums erstellt oder diese mit zufälligen Wäldern verglichen? …

11 mcmc monte-carlo random-forest cart

2

Angemessenheit des von Wilcoxon unterzeichneten Rangtests

Ich habe mich ein bisschen in den Cross Validated-Archiven umgesehen und keine Antwort auf meine Frage gefunden. Meine Frage lautet wie folgt: Wikipedia gibt drei Annahmen an, die für den von Wilcoxon signierten Rangtest gelten müssen (für meine Fragen leicht modifiziert): Sei Zi = Xi-Yi für i = 1, ..., …

11 r hypothesis-testing

1

Konvertieren Sie den SAS NLMIXED-Code für die Gamma-Regression ohne Inflation in R.

Ich versuche, eine Null-Inflations-Regression für eine kontinuierliche Antwortvariable in R auszuführen. Mir ist eine Gamlss-Implementierung bekannt, aber ich möchte diesen Algorithmus von Dale McLerran wirklich ausprobieren, der konzeptionell etwas einfacher ist. Leider ist der Code in SAS und ich bin nicht sicher, wie ich ihn für so etwas wie nlme …

11 r sas gamlss

2

Entwerfen eines Tests für einen Hellseher, der sagt, er könne Würfelwürfe beeinflussen

Nehmen wir an, ich habe einen Freund (nennen wir ihn "George"), der sagt, dass er den Würfelwurf mit seinem Verstand steuern kann (dh die Wahrscheinlichkeit erhöht, dass die Würfel auf eine bestimmte Zahl fallen, an die er denkt). Wie kann ich einen wissenschaftlich strengen Test entwerfen, um festzustellen, ob er …

11 probability experiment-design dice

1

Referenz für die Summe und Differenz stark korrelierter Variablen, die nahezu unkorreliert sind

In einem Artikel, den ich geschrieben habe, modelliere ich die Zufallsvariablen und anstelle von und , um die Probleme effektiv zu beseitigen, die auftreten, wenn und stark korreliert sind und die gleiche Varianz aufweisen (wie in meiner Anwendung). Die Schiedsrichter möchten, dass ich einen Hinweis gebe. Ich könnte es leicht …

11 correlation multicollinearity

5

Kann ich "linkes Auge" und "rechtes Auge" in meiner Stichprobe als zwei verschiedene Probanden verwenden?

Meine Daten sind wie folgt. Ich habe zwei Gruppen von Patienten. Patienten in jeder Gruppe hatten eine andere Art von Augenoperation. In jeder Gruppe wurden 5 Variablen an Patienten gemessen. Ich möchte diese Variablen zwischen den beiden Gruppen mit einem Permutationstest oder MANOVA vergleichen. Das Auge, an dem die Operation …

11 sampling

2

Ordnungsstatistik (z. B. Minimum) der unendlichen Sammlung von Chi-Quadrat-Variablen?

Dies ist mein erstes Mal hier. Bitte lassen Sie mich wissen, ob ich meine Frage in irgendeiner Weise klären kann (einschließlich Formatierung, Tags usw.). (Und hoffentlich kann ich später bearbeiten!) Ich habe versucht, Referenzen zu finden und mich mithilfe der Induktion zu lösen, bin aber bei beiden gescheitert. Ich versuche …

11 distributions chi-squared exponential order-statistics minimum

1

Ermittlung einer optimalen Diskretisierung von Daten aus einer kontinuierlichen Verteilung

Angenommen, Sie haben einen Datensatz Y1,...,YnY1,...,YnY_{1}, ..., Y_{n} aus einer kontinuierlichen Verteilung mit der Dichte p(y)p(y)p(y) , getragen auf [0,1][0,1][0,1] , dass nicht bekannt ist, aber nnn ist ziemlich groß , so eine Kerndichte (zum Beispiel) p^(y)p^(y)\hat{p}(y) , ziemlich genau. Für eine bestimmte Anwendung muss ich die beobachteten Daten in …

11 continuous-data discrete-data

5

SOM-Clustering für nominale / zirkuläre Variablen

Ich frage mich nur, ob jemand mit dem Clustering von nominalen Eingaben vertraut ist. Ich habe SOM als Lösung betrachtet, aber anscheinend funktioniert es nur mit numerischen Funktionen. Gibt es Erweiterungen für kategoriale Funktionen? Insbesondere habe ich mich über "Wochentage" als mögliche Funktionen gewundert. Natürlich ist es möglich, es in …

11 clustering unsupervised-learning self-organizing-maps

1

Wie zeichnet man einen Geröllplot in Python? [geschlossen]

Geschlossen. Diese Frage ist nicht zum Thema . Derzeit werden keine Antworten akzeptiert. Möchten Sie diese Frage verbessern? Aktualisieren Sie die Frage so dass es beim Thema für Kreuz Validated. Geschlossen im vergangenen Jahr . Ich verwende eine singuläre Vektorzerlegung auf einer Matrix und erhalte die U-, S- und Vt-Matrizen. …

11 data-visualization python svd

4

Gibt es Fälle, in denen es in k-means kein optimales k gibt?

Das ist mir seit mindestens ein paar Stunden in den Sinn gekommen. Ich habe versucht, ein optimales k für die Ausgabe des k-means-Algorithmus (mit einer Kosinus-Ähnlichkeitsmetrik ) zu finden, also habe ich die Verzerrung als Funktion der Anzahl der Cluster aufgetragen. Mein Datensatz ist eine Sammlung von 800 Dokumenten in …

11 machine-learning clustering k-means

2

Robuste multivariate Gaußsche Anpassung in R.

Ich muss eine verallgemeinerte Gaußsche Verteilung an eine 7-dim-Punktwolke anpassen, die eine beträchtliche Anzahl von Ausreißern mit hoher Hebelwirkung enthält. Kennen Sie ein gutes R-Paket für diesen Job?

11 r distributions normal-distribution robust

1

Warum führt das Bootstrapping der Residuen aus einem Modell mit gemischten Effekten zu antikonservativen Konfidenzintervallen?

Ich beschäftige mich normalerweise mit Daten, bei denen mehrere Personen unter zwei oder mehr Bedingungen jeweils mehrmals gemessen werden. Ich habe kürzlich mit der Modellierung gemischter Effekte gespielt, um Beweise für Unterschiede zwischen Bedingungen zu bewerten, wobei die Modellierung individualals zufälliger Effekt erfolgt. Um die Unsicherheit bezüglich der Vorhersagen aus …

11 confidence-interval mixed-model bootstrap monte-carlo simulation