Statistiken und Big Data intuition

9

Gibt es eine intuitive Erklärung, warum Multikollinearität ein Problem bei der linearen Regression ist?

Das Wiki diskutiert die Probleme, die auftreten, wenn Multikollinearität ein Problem in der linearen Regression ist. Das Grundproblem ist, dass Multikollinearität zu instabilen Parameterschätzungen führt, was es sehr schwierig macht, die Auswirkung unabhängiger Variablen auf abhängige Variablen zu bewerten. Ich verstehe die technischen Gründe für die Probleme (möglicherweise kann , …

85 regression intuition multicollinearity

8

Die Linie der besten Passform sieht nicht nach einer guten Passform aus. Warum?

Schauen Sie sich dieses Excel-Diagramm an: Die Best-Fit-Linie für den gesunden Menschenverstand scheint eine fast vertikale Linie zu sein, die direkt durch die Mitte der Punkte verläuft (von Hand in Rot bearbeitet). Die von Excel festgelegte lineare Trendlinie ist jedoch die dargestellte diagonale schwarze Linie. Warum hat Excel etwas produziert, …

82 regression excel intuition

10

"Varianz" intuitiv verstehen

Was ist der sauberste und einfachste Weg, um jemandem das Konzept der Varianz zu erklären? Was bedeutet es intuitiv? Wenn man dies seinem Kind erklären soll, wie würde man dann vorgehen? Es ist ein Konzept, das ich nur schwer artikulieren kann - insbesondere, wenn ich Varianz mit Risiko in Beziehung …

81 distributions variance standard-deviation inference intuition

13

Welche Rolle spielt der Logarithmus in Shannons Entropie?

Shannons Entropie ist das Negativ der Summe der Wahrscheinlichkeiten jedes Ergebnisses multipliziert mit dem Logarithmus der Wahrscheinlichkeiten für jedes Ergebnis. Welchen Zweck erfüllt der Logarithmus in dieser Gleichung? Eine intuitive oder visuelle Antwort (im Gegensatz zu einer zutiefst mathematischen Antwort) erhält Bonuspunkte!

72 entropy intuition sequence-analysis

8

Was ist mit einer Zufallsvariablen gemeint?

Was bedeuten sie, wenn sie "Zufallsvariable" sagen?

69 mathematical-statistics random-variable intuition definition

4

Was ist so 'Moment' an 'Momenten' einer Wahrscheinlichkeitsverteilung?

Ich weiß, was Momente sind und wie man sie berechnet und wie man die Momentgenerierungsfunktion verwendet, um Momente höherer Ordnung zu erhalten. Ja, ich kenne die Mathematik. Jetzt, wo ich mein Statistikwissen für die Arbeit verbessern muss, dachte ich, ich könnte diese Frage genauso gut stellen - es nervt mich …

65 distributions terminology moments intuition

18

Fragen zum Statistik-Interview

Ich suche nach statistischen Fragen (und wahrscheinlich auch nach Interviewfragen), von den grundlegendsten bis zu den fortgeschritteneren. Antworten sind nicht erforderlich (obwohl Links zu bestimmten Fragen auf dieser Website gut tun würden).

65 intuition careers

4

Intuitive Erklärung von Fisher Information und Cramer-Rao gebunden

Ich bin mit Fisher-Informationen nicht einverstanden, was es misst und wie es hilfreich ist. Auch die Beziehung zu Cramer-Rao ist mir nicht klar. Kann jemand bitte eine intuitive Erklärung dieser Konzepte geben?

59 estimation intuition fisher-information

13

Erhöht 10 Köpfe hintereinander die Wahrscheinlichkeit, dass der nächste Wurf ein Schwanz ist?

Ich gehe davon aus, dass Folgendes zutrifft: Wenn Sie von einer fairen Münze ausgehen und beim Werfen einer Münze 10 Köpfe hintereinander werfen, steigt die Wahrscheinlichkeit, dass die nächste Münze einen Schwanz wirft , nicht, unabhängig von der Wahrscheinlichkeit und / oder dem statistischen Jargon (entschuldigen Sie die Wortspiele). Unter …

57 probability independence intuition games bernoulli-process

2

Warum funktioniert das Schrumpfen?

Um Probleme bei der Modellauswahl zu lösen, werden durch eine Reihe von Methoden (LASSO, Ridge-Regression usw.) die Koeffizienten der Prädiktorvariablen gegen Null gesenkt. Ich suche nach einer intuitiven Erklärung, warum dies die Vorhersagefähigkeit verbessert. Wenn der wahre Effekt der Variablen tatsächlich sehr groß war, warum führt ein Verkleinern des Parameters …

55 lasso regularization ridge-regression intuition shrinkage

5

Was ist eine intuitive Erklärung dafür, wie sich PCA von einem geometrischen Problem (mit Abständen) zu einem linearen Algebraproblem (mit Eigenvektoren) entwickelt?

Ich habe viel über PCA gelesen, einschließlich verschiedener Tutorials und Fragen (wie diese , diese , diese und diese ). Das geometrische Problem, das PCA zu optimieren versucht, ist mir klar: PCA versucht, die erste Hauptkomponente durch Minimierung des Rekonstruktionsfehlers (Projektionsfehlers) zu finden, wodurch gleichzeitig die Varianz der projizierten Daten …

54 pca optimization linear-algebra intuition

3

Was ist die Intuition hinter SVD?

Ich habe über Singular Value Decomposition (SVD) gelesen. In fast allen Lehrbüchern wird erwähnt, dass es die Matrix in drei Matrizen mit gegebener Spezifikation zerlegt. Aber was ist die Intuition hinter der Aufspaltung der Matrix in einer solchen Form? PCA und andere Algorithmen zur Dimensionsreduzierung sind in dem Sinne intuitiv, …

50 matrix linear-algebra svd intuition

4

Warum ist der Korrelationskoeffizient zwischen X- und XY-Zufallsvariablen in der Regel 0,7?

Entnommen aus der praktischen Statistik für die medizinische Forschung, in der Douglas Altman auf Seite 285 schreibt: ... für zwei beliebige Größen X und Y wird X mit XY korreliert. Selbst wenn X und Y Stichproben von Zufallszahlen sind, würden wir eine Korrelation von X und XY von 0,7 erwarten …

49 correlation random-variable intuition

6

Was sind iid Zufallsvariablen?

Wie würden Sie IID (unabhängig und identisch verteilt) nicht-technischen Personen erklären?

48 random-variable intuition

5

Intuition über die Kullback-Leibler (KL) -Divergenz

Ich habe über die Intuition hinter der KL-Divergenz gelernt, wie sehr sich eine Modellverteilungsfunktion von der theoretischen / wahren Verteilung der Daten unterscheidet. Die Quelle, die ich lese, sagt weiter, dass das intuitive Verständnis der Distanz zwischen diesen beiden Verteilungen hilfreich ist, aber nicht wörtlich genommen werden sollte, da für …

47 distributions distance intuition kullback-leibler

Als «intuition» getaggte Fragen