Statistiken und Big Data

1

Erwarteter Wert des maximalen Verhältnisses von n iid normalen Variablen

Angenommen, sind iid von und bezeichnen das -te kleinste Element von . Wie könnte man das erwartete Maximum des Verhältnisses zwischen zwei aufeinanderfolgenden Elementen in nach oben begrenzen ? Das heißt, wie können Sie eine Obergrenze berechnen für:X1,...,XnX1,...,XnX_1,...,X_nN(μ,σ2)N(μ,σ2)N(\mu,\sigma^2)X(i)X(i)X_{(i)}iiiX1,...,XnX1,...,XnX_1,...,X_nX(i)X(i)X_{(i)} E[maxi=1,...,n−1(X(i+1)X(i))]E[maxi=1,...,n−1(X(i+1)X(i))]E\left[\max\limits_{i=1,...,n-1}\left(\frac{X_{(i+1)}}{X_{(i)}}\right)\right] Die Literatur, die ich finden konnte, konzentriert sich hauptsächlich auf das …

10 expected-value order-statistics ratio maximum

1

Schätzung anzeigen konvergiert durch Auftragsstatistik zum Perzentil

Sei eine Folge von iid-Zufallsvariablen, die aus einer alpha-stabilen Verteilung mit den Parametern α = 1,5 abgetastet wurden.X1,X2,…,X3nX1,X2,…,X3nX_1, X_2, \ldots, X_{3n} .α=1.5,β=0,c=1.0,μ=1.0α=1.5,β=0,c=1.0,μ=1.0\alpha = 1.5, \; \beta = 0, \; c = 1.0, \; \mu = 1.0 Betrachten Sie nun die Folge , wobei Y j + 1 = X 3 …

10 probability self-study monte-carlo convergence order-statistics

3

Ist es möglich, ein neuronales Netzwerk zu trainieren, um Bilder in einem bestimmten Stil zu zeichnen?

Ist es möglich, ein neuronales Netzwerk zu trainieren, um Bilder in einem bestimmten Stil zu zeichnen? (Es nimmt also ein Bild auf und zeichnet es in einem Stil neu, für den es trainiert wurde.) Gibt es eine zugelassene Technologie für so etwas? Ich kenne den DeepArt-Algorithmus. Es ist gut, das …

10 machine-learning neural-networks deep-learning

6

Wie können wir jemals die Populationsvarianz kennen?

Bei Hypothesentests stellt sich häufig die Frage, wie groß die Populationsvarianz ist. Meine Frage ist, wie können wir jemals die Populationsvarianz kennen? Wenn wir die gesamte Verteilung kennen würden, könnten wir genauso gut den Mittelwert der gesamten Bevölkerung kennen. Was ist dann der Sinn des Hypothesentests?

10 hypothesis-testing variance t-test z-test

1

Warum ändern p-Werte ihre Signifikanz, wenn sich die Reihenfolge der Kovariaten im aov-Modell ändert?

Ich habe einen Datensatz von 482 Beobachtungen. data=Populationfull Ich werde eine Genotyp-Assoziationsanalyse für 3 SNPs durchführen. Ich versuche ein Modell für meine Analyse zu erstellen und verwende das aov (y ~ x, data = ...). Für ein Merkmal habe ich mehrere feste Effekte und Kovariaten, die ich in das Modell …

10 r anova

2

Verwenden von LASSO nur zur Funktionsauswahl

In meiner maschinellen Lernen Klasse haben wir gelernt , wie ist LASSO Regression sehr gut Merkmalsauswahl durchführen, da es die Verwendung von macht Regularisierung.l1l1l_1 Meine Frage: Verwenden Benutzer das LASSO-Modell normalerweise nur zur Funktionsauswahl (und speichern diese Funktionen dann in einem anderen Modell für maschinelles Lernen) oder verwenden sie normalerweise …

10 feature-selection lasso regression-strategies

5

Wie teste ich einen Interaktionseffekt mit einem nicht parametrischen Test (z. B. einem Permutationstest)?

Ich habe zwei kategoriale / nominale Variablen. Jeder von ihnen kann nur zwei unterschiedliche Werte annehmen (also habe ich insgesamt 4 Kombinationen). Jede Wertekombination enthält eine Reihe numerischer Werte. Ich habe also 4 Sätze von Zahlen. Um es konkreter zu machen, nehmen wir an, ich habe male / femaleund young …

10 hypothesis-testing p-value nonparametric permutation-test

2

Kullback-Leibler-Divergenz für zwei Proben

Ich habe versucht, eine numerische Schätzung der Kullback-Leibler-Divergenz für zwei Stichproben zu implementieren. Um die Implementierung zu debuggen, ziehen Sie die Stichproben aus zwei Normalverteilungen und N ( 1 , 2 ) .N.( 0 , 1 )N(0,1)\mathcal N (0,1)N.( 1 , 2 )N(1,2)\mathcal N (1,2) Für eine einfache Schätzung habe …

10 estimation intuition kullback-leibler numerics

3

Gibt es eine Formel zur Berechnung des Medians?

Gibt es ein Äquivalent der Mittelwertformel: mean=1N∑i=1NXimean=1N∑i=1NXi\begin{equation} \mathrm{mean} = \cfrac{1}{N} \sum_{i=1}^{N} X_i \end{equation} für Median?

10 median definition

2

Regression: warum Test Normalität Gesamt Residuen, statt Residuen auf bedingten

Ich verstehe, dass bei der linearen Regression angenommen wird, dass die Fehler normal verteilt sind, abhängig vom vorhergesagten Wert von y. Dann betrachten wir die Residuen als eine Art Proxy für die Fehler. Es wird oft empfohlen, eine Ausgabe wie folgt zu generieren : . Ich verstehe jedoch nicht, worum …

10 regression assumptions

2

Ist Bias eine Eigenschaft des Schätzers oder bestimmter Schätzungen?

Als Beispiel begegne ich oft Studenten, die wissen, dass Observed ein voreingenommener Schätzer für Population R 2 ist . Wenn sie dann ihre Berichte schreiben, sagen sie Dinge wie:R2R2R^2R2R2R^2 "Ich habe Observed und Adjusted R 2 berechnet , und sie waren ziemlich ähnlich, was darauf hindeutet, dass der von uns …

10 mathematical-statistics terminology bias estimators

1

Dauern neuronale Netze normalerweise eine Weile, um während des Trainings „einzusteigen“?

Ich versuche, ein tiefes neuronales Netzwerk für die Klassifizierung mithilfe der Rückausbreitung zu trainieren. Insbesondere verwende ich ein Faltungs-Neuronales Netzwerk zur Bildklassifizierung unter Verwendung der Tensor Flow-Bibliothek. Während des Trainings habe ich ein seltsames Verhalten und frage mich nur, ob dies typisch ist oder ob ich möglicherweise etwas falsch mache. …

10 machine-learning classification neural-networks conv-neural-network tensorflow

2

Fettfingerverteilung

Kurze Frage: Gibt es eine Fettfingerverteilung? Ich bin sicher, wenn es existiert, hat es einen anderen Namen. Ich weiß nicht, wie ich es als analytische Funktion formulieren soll. Können Sie mir helfen, entweder eine vorhandene Version davon zu finden oder sie in einer saubereren Form als einer riesigen Simulation zu …

10 distributions simulation

2

Inverse Kovarianzmatrix gegen Kovarianzmatrix in PCA

Macht es in PCA einen Unterschied, ob wir Hauptkomponenten der inversen Kovarianzmatrix auswählen oder ob wir Eigenvektoren der Kovarianzmatrix fallen lassen, die großen Eigenwerten entsprechen? Dies hängt mit der Diskussion in diesem Beitrag zusammen .

10 machine-learning pca computational-statistics

3

Welches Regressionsmodell eignet sich am besten für Zähldaten?

Ich versuche ein wenig in die Statistik einzusteigen, aber ich bin mit etwas festgefahren. Meine Daten lauten wie folgt: Year Number_of_genes 1990 1 1991 1 1993 3 1995 4 Ich möchte jetzt ein Regressionsmodell erstellen, um die Anzahl der Gene für ein bestimmtes Jahr anhand der Daten vorhersagen zu können. …

10 regression count-data poisson-regression