Statistiken und Big Data

Fragen und Antworten für Personen, die sich für Statistik, maschinelles Lernen, Datenanalyse, Data Mining und Datenvisualisierung interessieren

1
Wie gehe ich mit mehreren Messungen pro Teilnehmer mit kategorialen Daten um?
Ich habe ein Experiment durchgeführt, bei dem ich Messungen von mehreren Teilnehmern gesammelt habe. Jeder relevante Datenpunkt hat zwei Variablen, beide kategorisch: Tatsächlich hat jede Variable zwei mögliche Werte (Antworten auf zwei Ja / Nein-Fragen). Ich möchte einen statistischen Hypothesentest, um zu überprüfen, ob eine Korrelation zwischen diesen beiden Variablen …
2
Wie breiten sich Gradienten in einem nicht abgerollten wiederkehrenden neuronalen Netzwerk aus?
Ich versuche zu verstehen, wie rnns verwendet werden können, um Sequenzen anhand eines einfachen Beispiels vorherzusagen. Hier ist mein einfaches Netzwerk, bestehend aus einem Eingang, einem versteckten Neuron und einem Ausgang: Das versteckte Neuron ist die Sigmoidfunktion, und die Ausgabe wird als einfache lineare Ausgabe angesehen. Ich denke, das Netzwerk …
1
Unvoreingenommene Schätzer für Schiefe und Kurtosis
Die Schiefe und Kurtosis sind definiert als: ζ4=E[(X-μ)4]ζ3= E.[ ( X.- μ )3]]E.[ ( X.- μ )2]]3 / 2= μ3σ3ζ3=E.[(X.- -μ)3]]E.[(X.- -μ)2]]3/.2=μ3σ3\zeta_3 = \frac{E[(X-\mu)^3]}{E[(X-\mu)^2]^{3/2}} = \frac{\mu_3}{\sigma^3} ζ4= E.[ ( X.- μ )4]]E.[ ( X.- μ )2]]2= μ4σ4ζ4=E.[(X.- -μ)4]]E.[(X.- -μ)2]]2=μ4σ4\zeta_4 = \frac{E[(X-\mu)^4]}{E[(X-\mu)^2]^2} = \frac{\mu_4}{\sigma^4} Die folgenden Formeln werden verwendet, um die …
1
Was ist genau nach t-Verteilung verteilt?
Ich versuche die Idee hinter der T-Distribution zu verstehen. Hier sind die Schritte, die ich bisher verstanden habe: Wir verwenden eine Stichprobe von N Elementen, um den Populationsmittelwert abzuschätzen. Im Detail verwenden wir den Stichprobenmittelwert als Schätzung des Populationsmittelwerts. Wir wollen wissen, wie nahe unsere Schätzung am realen Wert liegt. …
3
Wie berechnet man den p.-Wert eines Odds Ratio in R?
Ich habe folgende Wertetabelle: 25 75 38 162 Das Odds Ratio beträgt 0,7037 und log (OR) beträgt -0,3514. Für eine Kontingenztabelle mit den Werten a, b, c und d ist die Varianz von log (OR) gegeben durch (1/a + 1/b + 1/c + 1/d) Wie kann ich den p.-Wert von …
8 r  variance 
3
Berechnung von Mittelwert, Median, Modus und Standardabweichung aus der Verteilung
Wie berechnet man Mittelwert, Varianz, Median, Standardabweichung und Verteilungsmodus? Wenn ich zufällig Zahlen generiere, die die Normalverteilung bilden, habe ich den Mittelwert als m=24.2Standardabweichung wie folgt angegeben sd=2.2: > dist = rnorm(n=1000, m=24.2, sd=2.2) Dann kann ich folgendes tun: Bedeuten: > mean(dist) [1] 24.17485 Varianz: > var(dist) [1] 4.863573 Median: …
8 r  distributions  mean 
1
Genaue Definition von Maxout
Ich habe versucht herauszufinden, was genau es mit der Aktivierungsfunktion "Maxout" in neuronalen Netzen bedeutet. Es gibt diese Frage, dieses Papier und sogar das Deep Learning-Buch von Bengio et al. , außer mit nur ein paar Informationen und einem großen TODO daneben. Ich werde die hier beschriebene Notation zur Verdeutlichung …
2
Wahrscheinlichkeit, dass Buchstaben in einer Reihenfolge in einer Zeichenfolge vorkommen
m+1m+1m+1{a,b,c,d,e,...,$}{a,b,c,d,e,...,$}\{a, b, c, d, e,..., \$\}p=Pr(a)=Pr(b)=⋯p=Pr(a)=Pr(b)=⋯p = \Pr(a) = \Pr(b) =\cdotsPr($)=1−(Pr(a)+Pr(b)+⋯)=1−mpPr($)=1−(Pr(a)+Pr(b)+⋯)=1−mp\Pr(\$) = 1 - (\Pr(a)+\Pr(b)+\cdots)=1-mp Wie groß ist bei einer zufälligen Zeichenfolge der Länge die Wahrscheinlichkeit, dass die Buchstaben (ohne ) in der angegebenen Reihenfolge (nicht unbedingt nacheinander) auftreten? Mit anderen Worten, die Zeichenfolge hat die Länge und erfüllt den …
3
Sollte ich mich darum kümmern, dass die T-Test-Leistung relativ gering ist, wenn H0 bereits abgelehnt wird?
Ich habe zwei ziemlich kleine Stichproben (jeweils ) und erhalte für sie eine T-Test-Leistung von zwei Stichproben von 0,49, was relativ klein ist (berechnet durch R ). Der Welch Two Sample t-Test ergibt hier jedoch einen p-Wert von , so dass die Nullhypothese verworfen werden kann.n = 7n=7n=7power.t.test()0,0320.0320.032 Sollte ich …
2
Aus Kernel-Dichteschätzung simulieren (empirisches PDF)
Ich habe einen Vektor Xvon N=900Beobachtungen, die am besten mit einem globalen Bandbreitenkerndichteschätzer modelliert werden können (parametrische Modelle, einschließlich dynamischer Mischungsmodelle, erwiesen sich als nicht gut passend): Jetzt möchte ich von diesem KDE aus simulieren. Ich weiß, dass dies durch Bootstrapping erreicht werden kann. In R kommt es auf diese …
1
Was ist das Äquivalent für cdfs von MCMC für pdfs?
In Verbindung mit einer Kreuzvalidierten Frage zur Simulation aus einer bestimmten Kopula, dh einem multivariaten cdf definiert aufC(u1,…,uk)C(u1,…,uk)C(u_1,\ldots,u_k)[0,1]k[0,1]k[0,1]^k , begann ich mich über das größere Bild zu wundern, nämlich wie, Kann man bei einer solchen Funktion einen generischen Algorithmus aus der entsprechenden Wahrscheinlichkeitsverteilung simulieren? Offensichtlich besteht eine Lösung darin, CCC …
2
Elemente statistischer Lernalternativen
Elements of Statistical Learning (ESL) ist ein Buch mit einer fantastischen Breite und Tiefe. Es behandelt das Wesentliche der sehr modernen Methoden, indem es die Arbeiten zitiert, in denen diese ursprünglichen Studien entstanden sind. Ich finde die Sprache des Buches jedoch wirklich sehr, sehr unerschwinglich. Ich glaube, es gibt einen …
1
Sollte die Standardabweichung in einem Student-T-Test korrigiert werden?
Mit dem Student-T-Test wird T-Critical berechnet über: t = X.¯- μ0s / n√t=X¯−μ0s/nt = \frac{\bar{X} - \mu_{0}}{s / \sqrt{n}} Im Wikipedia-Artikel über die unvoreingenommene Schätzung der Standardabweichung finden Sie im Abschnitt Ergebnis für die Normalverteilung einen Korrekturfaktor für die gemessene Standardabweichung s der Stichprobe, basierend auf der Stichprobengröße. Fragen:c4( n …
Durch die Nutzung unserer Website bestätigen Sie, dass Sie unsere Cookie-Richtlinie und Datenschutzrichtlinie gelesen und verstanden haben.
Licensed under cc by-sa 3.0 with attribution required.