Statistiken und Big Data

1

WARENKORB: Auswahl des besten Prädiktors für die Aufteilung, wenn die Gewinne bei der Abnahme der Verunreinigungen gleich sind?

Meine Frage befasst sich mit Klassifikationsbäumen . Betrachten Sie das folgende Beispiel aus dem Iris-Datensatz: Ich möchte den besten Prädiktor für die erste Aufteilung manuell auswählen. Nach dem CART-Algorithmus ist das beste Merkmal für eine Aufteilung dasjenige, das die Abnahme der Verunreinigung der Partition maximiert, auch Gini-Verstärkung genannt: G i …

8 r machine-learning classification data-mining cart

4

Warum funktioniert die Methode von Stouffer?

Es scheint eine ziemlich einfache Frage zu sein, aber wenn ich wirklich darüber nachdenke, macht Stouffers Methode für mich keinen Sinn. Deshalb: Nehmen Sie eine zweiseitige Hypothese an. Sie berechnen zuerst aus p- Werten. Nehmen wir also ein ziemlich einfaches Beispiel. Nehmen wir zwei p- Werte von 0,05 . Dies …

8 p-value meta-analysis combining-p-values z-statistic

2

Kann jemand erklären, was das Foldid-Argument in glmnet bewirkt?

Ich versuche zu bestimmen, welches Alpha in meiner glmnetFunktion verwendet werden soll, aber die Hilfedatei sagt mir: Beachten Sie, dass cv.glmnet NICHT nach Werten für Alpha sucht. Es sollte ein bestimmter Wert angegeben werden, andernfalls wird standardmäßig Alpha = 1 angenommen. Wenn Benutzer auch Alpha kreuzvalidieren möchten , sollten sie …

8 r lasso ridge-regression glmnet

1

Warum funktioniert Deep Learning mit kleinen Datenmengen nicht gut?

Ich bin neu im tiefen Lernen, daher könnte dies eine triviale Frage sein. Aber ich frage mich, warum Deep Learning (oder neuronales Netzwerk) bei kleinen beschrifteten Daten nicht sehr gut funktioniert. Unabhängig davon, welche Forschungsarbeiten ich gelesen habe, sind ihre Datensätze riesig. Intuitiv ist das nicht überraschend, da unser Gehirn …

8 neural-networks deep-learning

4

Systematischer / Messfehler bei linearer Regression

Angenommen, ich habe einen Datensatz in dem die Unsicherheit in den Messungen (die sich aus der Ausbreitung systematischer Fehler aus dem Messgerät ergeben) für jeden unterschiedlich ist Punkt. Wenn ich eine lineare Regression des Datensatzes durchführe, wie berechne ich die Unsicherheit in der Steigung? Ich möchte eine explizite Prozedur oder …

8 linear-model measurement-error errors-in-variables

3

Wie kann man beweisen, dass ein Ereignis unendlich oft auftritt (fast sicher)?

Übung: Es gibt einen fairen 6-seitigen Würfel und eine voreingenommene Münze mit einer Wahrscheinlichkeit von p> 0, dass bei jedem Wurf Köpfe auftauchen. Der Würfel wird unendlich oft gewürfelt, und wenn Sie eine 6 würfeln, werfen Sie die Münze. Beweisen Sie, dass Sie mit Wahrscheinlichkeit 1 unendlich oft "Köpfe" werfen. …

8 probability self-study proof theory

1

Was ist der Sinn von grafischen Modellen?

Ich habe den Tag damit verbracht, etwas über das bnlearn-Paket in R zu lernen, nur um festzustellen, dass Bayes'sche Modelle nicht mit ungerichteten Graphen funktionieren. Ich versuche, etwas über das Markov Random Field Network zu lernen, und bisher konnte ich nur die grafische Struktur mit einem grafischen LASSO erstellen. In …

8 machine-learning graphical-model parameterization bayesian-network

1

Rang und Z-Transformation statt Wilcoxon?

Andrew Gelman schlägt in einem kürzlich veröffentlichten Beitrag in seinem Blog vor, einen Rang zu verwenden, den Rang in einen Z-Score umzuwandeln und dann parametrische Tests und Tools zu verwenden, anstatt nicht parametrische Tests durchzuführen. Davon habe ich noch nie gehört. Eine Suche bei Google hat mich auf diese R-Funktion …

8 nonparametric wilcoxon-mann-whitney wilcoxon-signed-rank ranks nonparametric-regression

2

Anwendung der Rubin-Regel zum Kombinieren mehrfach unterstellter Datensätze

Ich hoffe, die Ergebnisse einer ziemlich einfachen Analyse zusammenfassen zu können, die mit mehrfach unterstellten Daten durchgeführt wurde (z. B. multiple Regression, ANOVA). Die mehrfache Imputation und die Analysen wurden in SPSS abgeschlossen, aber SPSS liefert keine gepoolten Ergebnisse für einige Statistiken, einschließlich F-Wert, Kovarianzmatrix, R-Quadrat usw. Ich habe einige …

8 spss missing-data multiple-imputation pooling

1

Regression ohne Abfangen: Ableiten von in kleinsten Quadraten (keine Matrizen)

In einer Einführung in das statistische Lernen (James et al.) In Abschnitt 3.7, Übung 5, heißt es, dass die Formel für Annahme einer linearen Regression ohne Achsenabschnitt lautet wobei und sind die unter OLS üblichen Schätzungen für einfache lineare Regression ( ).β^1β^1\hat{\beta}_1& bgr;0=ˉy-β1ˉxβ1=Sxyβ^1= ∑i = 1nxichyich∑i = 1nx2ich,β^1=∑i=1nxiyi∑i=1nxi2,\hat{\beta}_1 = \dfrac{\displaystyle\sum\limits_{i=1}^{n}x_iy_i}{\displaystyle …

8 self-study least-squares

3

Statistischer Test zur Erhöhung der Inzidenz eines seltenen Ereignisses

Ich habe simulierte Daten von 2500 Personen bezüglich der Inzidenz einer seltenen Krankheit über 20 Jahre year number_affected 1 0 2 0 3 1 4 0 5 0 6 0 7 1 8 0 9 1 10 0 11 1 12 0 13 0 14 1 15 1 16 0 …

8 time-series hypothesis-testing trend

1

Mehrere ARIMA-Modelle passen gut zu Daten. Wie bestimme ich die Reihenfolge? Richtiger Ansatz?

Ich habe zwei Zeitreihen (Parameter eines Modells für Männer und Frauen) und möchte ein geeignetes ARIMA-Modell identifizieren, um Prognosen zu erstellen. Meine Zeitreihe sieht aus wie: Die Darstellung und der ACF sind instationär (die Spitzen des ACF schneiden sehr langsam ab). Daher verwende ich Differenzierung und erhalte: Dieses Diagramm zeigt, …

8 r time-series modeling arima autocorrelation

1

Wird angenommen, dass Gruppeneffekte in einem Modell mit gemischten Effekten aus einer Normalverteilung ausgewählt wurden?

Angenommen, wir sind daran interessiert, wie sich die Anzahl der Stunden, die diese Schüler studieren, auf die Noten der Schülerprüfungen auswirkt. Wir befragen Schüler aus verschiedenen Schulen. Wir führen das folgende Modell mit gemischten Effekten aus: Exam.gradesich= a + β1× Stunden studiertich+ Schulej+ eichexam.gradesi=a+β1×hours.studiedi+schoolj+ei \text{exam.grades}_i = a + \beta_1 \times …

8 regression normal-distribution confidence-interval mixed-model variance

1

Grundlegendes zur Warnmeldung „Krawatten sind vorhanden“ in Kruskal-Wallis post hoc

Ich führe Post-hoc-Vergleiche nach einem Kruskal-Wallis-Test durch. Ich verwende das PMCMR- Paket. > posthoc.kruskal.nemenyi.test( preference ~ instrument) Pairwise comparisons using Tukey and Kramer (Nemenyi) test with Tukey-Dist approximation for independent samples data: preference by instrument Cello Drums Guitar Drums 0.157 - - Guitar 0.400 0.953 - Harp 0.013 0.783 0.458 …

8 r ties

3

Wahrscheinlichkeit von 10000: 1 Wahrscheinlichkeit tritt genau einmal in 10.000 Versuchen auf

Ich bin daran interessiert, den Unterschied zwischen der "Wahrscheinlichkeit" eines zufälligen Ereignisses und einer bestimmten Wahrscheinlichkeit, die tatsächlich auftritt, genau so zu verstehen, wie es als wahrscheinlich bezeichnet wird. dh wenn ein Ereignis eine Wahrscheinlichkeit von 1 zu 10000 hat, wie hoch ist die Wahrscheinlichkeit, dass es in 10000 Versuchen …

8 probability likelihood