Statistiken und Big Data

3

Die Summe der exponentiellen Zufallsvariablen folgt Gamma und wird durch die Parameter verwechselt

Ich habe gelernt, dass die Summe der exponentiellen Zufallsvariablen der Gamma-Verteilung folgt. Aber überall, wo ich lese, ist die Parametrisierung anders. Zum Beispiel beschreibt Wiki die Beziehung, sagt aber nicht, was ihre Parameter tatsächlich bedeuten? Form, Skala, Rate, 1 / Rate? Exponentialverteilung: ~ e x p ( & lgr; ) …

18 distributions probability gamma-distribution

4

Verwendung des Versatzes im Binomialmodell zur Berücksichtigung einer erhöhten Anzahl von Patienten

Zwei verwandte Fragen von mir. Ich habe einen Datenrahmen, der die Anzahl der Patienten in einer Spalte (Bereich 10 - 17 Patienten) sowie Nullen und Einsen enthält, aus denen hervorgeht, ob an diesem Tag ein Vorfall aufgetreten ist. Ich verwende ein Binomialmodell, um die Wahrscheinlichkeit eines Vorfalls auf die Anzahl …

18 binomial generalized-linear-model offset

2

Wie reduziert die lineare Diskriminanzanalyse die Dimensionen?

Es gibt Wörter aus "Die Elemente des statistischen Lernens" auf Seite 91: Die K-Schwerpunkte im p-dimensionalen Eingangsraum überspannen höchstens den K-1-dimensionalen Unterraum, und wenn p viel größer als K ist, ist dies ein beträchtlicher Dimensionsabfall. Ich habe zwei Fragen: Warum überspannen die K-Schwerpunkte im p-dimensionalen Eingaberaum höchstens den K-1-dimensionalen Unterraum? …

18 machine-learning discriminant-analysis

2

Wie berechnet man die Ratlosigkeit eines Holdouts mit Latent Dirichlet Allocation?

Ich bin verwirrt darüber, wie die Verwirrung einer Holdout-Stichprobe bei der Latent Dirichlet Allocation (LDA) berechnet wird. Die Zeitungen über das Thema rauschen darüber hinweg und lassen mich denken, ich vermisse etwas Offensichtliches ... Ratlosigkeit wird als ein gutes Maß für die Leistung von LDA angesehen. Die Idee ist, dass …

18 text-mining topic-models

2

Wie kann ich eine signifikante Gesamt-ANOVA erhalten, aber keine signifikanten paarweisen Unterschiede zum Tukey-Verfahren?

Ich habe mit R an ANOVA gespielt und dabei signifikante Unterschiede festgestellt. Als ich jedoch nach dem Tukey-Verfahren überprüfte, welche Paare signifikant unterschiedlich waren, bekam ich keine davon. Wie kann das möglich sein? Hier ist der Code: fit5_snow<- lm(Response ~ Stimulus, data=audio_snow) anova(fit5_snow) > anova(fit5_snow) Analysis of Variance Table Response: …

18 anova post-hoc tukey-hsd

5

Welche robusten Korrelationsmethoden werden tatsächlich verwendet?

Ich plane eine Simulationsstudie, in der ich die Leistung mehrerer robuster Korrelationstechniken mit unterschiedlichen Verteilungen (verzerrt, mit Ausreißern usw.) vergleiche. Mit robust meine ich den Idealfall, robust gegen a) verzerrte Verteilungen, b) Ausreißer und c) schwere Schwänze zu sein. Zusammen mit der Pearson-Korrelation als Grundlinie wollte ich folgende robustere Maßnahmen …

18 r correlation robust spearman-rho winsorizing

1

Wie sollen Standardfehler für Mixed-Effects-Modellschätzungen berechnet werden?

Wie sollen insbesondere die Standardfehler der Fixeffekte in einem linearen Mischeffektmodell (im häufigeren Sinne) berechnet werden? Ich bin zu der Annahme , dass die typischen Schätzungen ( ), wie sie in Laird und Ware [1982] vorgestellt wurden, SE's dazu geben werden werden in ihrer Größe unterschätzt, weil die geschätzten Varianzkomponenten …

18 r mixed-model random-effects-model

2

Variable Wichtigkeit von GLMNET

Ich möchte das Lasso als Methode zur Auswahl von Merkmalen und zur Anpassung eines Vorhersagemodells an ein binäres Ziel verwenden. Im Folgenden ist ein Code aufgeführt, mit dem ich die Methode mit regulierter logistischer Regression ausprobiert habe. Meine Frage ist, dass ich eine Gruppe von "signifikanten" Variablen erhalte, aber bin …

18 logistic importance glmnet

2

Deep Learning vs. Entscheidungsbäume und Methoden fördern

Ich suche nach Artikeln oder Texten, die vergleichen und diskutieren (entweder empirisch oder theoretisch): Boosting- und Entscheidungsbaum- Algorithmen wie Random Forests oder AdaBoost und GentleBoost werden auf Entscheidungsbäume angewendet. mit Deep Learning Methoden wie Restricted Boltzmann Machines , Hierarchical Temporal Memory , Convolutional Neural Networks , etc. Kennt jemand einen …

18 machine-learning deep-learning cart rbm adaboost

4

Wie lässt sich das Bayes'sche Gerüst besser interpretieren, wenn wir normalerweise uninformative oder subjektive Prioritäten verwenden?

Es wird oft argumentiert, dass das Bayes'sche Gerüst einen großen Vorteil bei der Interpretation hat (gegenüber dem Frequentisten), weil es die Wahrscheinlichkeit eines Parameters berechnet, wenn die Daten gegeben sind - anstelle von wie in frequentistischer Rahmen. So weit, ist es gut.p ( x | θ )p ( θ | …

18 bayesian interpretation prior likelihood posterior

1

Eingeschränkte lineare Regression durch einen bestimmten Punkt

Ich habe einen Punkt (x, y), für den ich einen linearen Regressor benötige, um einen gegebenen Datensatz (X, Y) zu durchlaufen. Wie implementiere ich das in R?

18 r regression

5

Textklassifizierung in großem Maßstab

Ich möchte meine Textdaten klassifizieren. Ich habe 300 classes200 Schulungsunterlagen pro Klasse (so 60000 documents in total) und dies wird wahrscheinlich zu sehr hohen Maßangaben führen (wir suchen möglicherweise nach mehr als 1 Million Dimensionen ). Ich möchte die folgenden Schritte in der Pipeline ausführen (um Ihnen einen Eindruck von …

18 machine-learning classification text-mining

3

Was ist der Unterschied zwischen "Fehlerquote" und "Standardfehler"?

Ist "Fehlergrenze" gleich "Standardfehler"? Ein (einfaches) Beispiel zur Veranschaulichung des Unterschieds wäre toll!

18 definition

3

Gibt es eine Möglichkeit, eine benutzerdefinierte Funktion in R zu maximieren / zu minimieren?

Ich versuche, eine benutzerdefinierte Funktion zu minimieren. Es sollte fünf Parameter und den Datensatz akzeptieren und alle möglichen Berechnungen durchführen, um eine einzige Zahl als Ausgabe zu erhalten. Ich möchte eine Kombination von fünf Eingabeparametern finden, die die kleinste Ausgabe meiner Funktion ergibt.

18 r optimization

6

Gibt es ein R-Äquivalent zu SAS PROC FREQ?

Kennt jemand ein R-Äquivalent zu SAS PROC FREQ? Ich versuche, zusammenfassende beschreibende Statistiken für mehrere Variablen gleichzeitig zu generieren.

18 r descriptive-statistics sas