Statistiken und Big Data

4

Ich habe eine Frage zur Klassifizierung im Allgemeinen. Sei f ein Klassifikator, der eine Menge von Wahrscheinlichkeiten mit bestimmten Daten D ausgibt. Normalerweise würde man sagen: Wenn P (c | D)> 0,5, ordnen wir eine Klasse 1 zu, andernfalls 0 (sei dies eine Binärzahl) Einstufung). Meine Frage ist, was ist, …

49 machine-learning classification binary-data threshold

1

Wie groß sollte die Chargengröße für den stochastischen Gradientenabstieg sein?

Ich verstehe, dass der stochastische Gradientenabstieg verwendet werden kann, um ein neuronales Netzwerk mithilfe von Backpropagation zu optimieren, indem jede Iteration mit einer anderen Stichprobe des Trainingsdatensatzes aktualisiert wird. Wie groß soll die Losgröße sein?

49 machine-learning neural-networks gradient-descent backpropagation

4

Wie sind Regression, T-Test und ANOVA alle Versionen des allgemeinen linearen Modells?

Wie sind sie alle Versionen der gleichen statistischen Grundmethode?

49 regression self-study anova generalized-linear-model t-test

2

Wie ist der Mittelwertvergleich aus verschiedenen Stichprobengrößen zu interpretieren?

Nehmen Sie den Fall von Buchbewertungen auf einer Website. Buch A wird von 10.000 Personen mit einer durchschnittlichen Bewertung von 4,25 und der Varianz bewertet . In ähnlicher Weise wird Buch B von 100 Personen bewertet und hat eine Bewertung von 4,5 mit σ = 0,25 .σ=0.5σ=0.5\sigma = 0.5σ=0.25σ=0.25\sigma = …

49 t-test mean sample-size

1

Bootstrap vs. Jackknife

Sowohl Bootstrap- als auch Jackknife-Methoden können verwendet werden, um die Abweichung und den Standardfehler einer Schätzung abzuschätzen, und die Mechanismen beider Resampling-Methoden sind nicht sehr unterschiedlich: Stichprobenerfassung mit Ersetzung vs. Allerdings ist Jackknife in Forschung und Praxis nicht so beliebt wie Bootstrap. Gibt es einen offensichtlichen Vorteil bei der Verwendung …

49 r confidence-interval bootstrap jackknife

4

Warum ist der Korrelationskoeffizient zwischen X- und XY-Zufallsvariablen in der Regel 0,7?

Entnommen aus der praktischen Statistik für die medizinische Forschung, in der Douglas Altman auf Seite 285 schreibt: ... für zwei beliebige Größen X und Y wird X mit XY korreliert. Selbst wenn X und Y Stichproben von Zufallszahlen sind, würden wir eine Korrelation von X und XY von 0,7 erwarten …

49 correlation random-variable intuition

6

Ist die durchschnittliche Bewertung von Amazon irreführend?

Wenn ich es richtig verstehe, sind Buchbewertungen auf einer Skala von 1 bis 5 Likert-Bewertungen. Das heißt, eine 3 für mich muss nicht unbedingt eine 3 für einen anderen sein. Es ist eine Ordnungsskala IMO. Man sollte die Ordnungsskalen nicht wirklich mitteln, kann aber definitiv den Modus, den Median und …

49 mean ordinal-data likert

3

Warum ist die logistische Regression ein linearer Klassifikator?

Wie kann die logistische Regression als linearer Klassifikator betrachtet werden, da wir die logistische Funktion verwenden, um eine lineare Kombination der Eingabe in eine nicht lineare Ausgabe umzuwandeln? Lineare Regression ist wie ein neuronales Netzwerk ohne verborgene Schicht. Warum werden neuronale Netzwerke als nichtlineare Klassifikatoren betrachtet und logistische Regression ist …

49 logistic classification neural-networks

4

Manuelles Berechnen des P-Werts aus dem t-Wert im t-Test

Ich habe einen Beispieldatensatz mit 31 Werten. Ich habe einen zweiseitigen t-Test mit R durchgeführt, um zu testen, ob der wahre Mittelwert gleich 10 ist: t.test(x=data, mu=10, conf.level=0.95) Ausgabe: t = 11.244, df = 30, p-value = 2.786e-12 alternative hypothesis: true mean is not equal to 10 95 percent confidence …

49 r statistical-significance t-test p-value

2

Was ist ein Unterschied zwischen Zufallseffekt-, Fixeffekt- und Randmodell?

Ich versuche meine statistischen Kenntnisse zu erweitern. Ich komme aus den Naturwissenschaften mit einem "rezeptbasierten" Ansatz für statistische Tests, bei dem wir sagen, dass es kontinuierlich und normalverteilt ist - OLS-Regression . In meiner Lektüre bin ich auf folgende Begriffe gestoßen: Zufallseffektmodell, Modell mit festen Effekten, Randmodell. Meine Fragen sind: …

49 random-effects-model fixed-effects-model marginal

6

Was ist der beste Weg, um den Unterschied zwischen Sensitivität, Spezifität, Präzision, Genauigkeit und Erinnerung zu merken?

Obwohl ich diese Begriffe 502847894789-mal gesehen habe, kann ich mich ein Leben lang nicht an den Unterschied zwischen Sensibilität, Spezifität, Präzision, Genauigkeit und Erinnerung erinnern. Das sind ziemlich einfache Konzepte, aber die Namen sind für mich sehr uninteressant, deshalb verwechsle ich sie immer wieder. Was ist eine gute Möglichkeit, über …

49 terminology accuracy sensitivity-specificity

4

Bedeutet Korrelation = 0,2, dass es eine Assoziation „nur bei 1 von 5 Personen“ gibt?

In The Idiot Brain: Ein Neurowissenschaftler erklärt, was Ihr Kopf wirklich vorhat , schrieb Dean Burnett Die Korrelation zwischen Größe und Intelligenz wird normalerweise mit etwa , was bedeutet, dass Größe und Intelligenz nur bei von Personen in Zusammenhang zu stehen scheinen .0.20.20.2111555 Für mich klingt das falsch: Ich verstehe …

48 correlation neuroscience

3

Rekursive oder rekursive neuronale Netze: Was ist besser für NLP?

Es gibt wiederkehrende neuronale Netze und rekursive neuronale Netze. Beide werden normalerweise mit dem gleichen Akronym bezeichnet: RNN. Laut Wikipedia sind Recurrent NN in der Tat Recursive NN, aber ich verstehe die Erklärung nicht wirklich. Außerdem scheine ich nicht zu finden, was (mit Beispielen oder so) für die Verarbeitung natürlicher …

48 machine-learning neural-networks deep-learning natural-language

6

Wie teste ich, dass zwei stetige Variablen unabhängig sind?

Angenommen , ich habe eine Probe aus der gemeinsamen Verteilung von und . Wie teste ich die Hypothese , dass und sind unabhängig ?X Y X Y(Xn,Yn),n=1..N(Xn,Yn),n=1..N(X_n,Y_n), n=1..NXXXYYYXXXYYY Es wird keine Annahme über die Gelenk- oder Randverteilungsgesetze von und (am allerwenigsten die Gelenknormalität, da in diesem Fall die Unabhängigkeit mit …

48 hypothesis-testing references independence

7

Ist Chi-Quadrat immer ein einseitiger Test?

Ein veröffentlichter Artikel ( pdf ) enthält diese 2 Sätze: Darüber hinaus kann eine fehlerhafte Berichterstattung durch die Anwendung falscher Regeln oder mangelnde Kenntnis des statistischen Tests verursacht werden. Beispielsweise kann die Gesamt-df in einer ANOVA als der Fehler df in der Berichterstattung eines Tests angesehen werden, oder der Forscher …

48 hypothesis-testing chi-squared