Statistiken und Big Data

30

Ich bin ein Diplom-Psychologe, und da ich mehr und mehr selbständige Studien in Statistik mache, staune ich zunehmend über die Unzulänglichkeit meiner formalen Ausbildung. Sowohl die persönliche Erfahrung als auch die Erfahrung aus zweiter Hand legen nahe, dass die statistische Strenge in der Ausbildung von Studenten und Absolventen in der …

227 fallacy

11

Gibt es einen Grund, den AIC oder den BIC dem anderen vorzuziehen?

Sowohl der AIC als auch der BIC sind Methoden zur Bewertung der Modellanpassung, die für die Anzahl der geschätzten Parameter bestraft werden. Wie ich es verstehe, bestraft BIC Modelle mehr für freie Parameter als AIC. Gibt es neben einer Präferenz, die auf der Stringenz der Kriterien basiert, andere Gründe, AIC …

222 modeling aic cross-validation bic model-selection

5

Kompromiss zwischen Stapelgröße und Anzahl der Iterationen zum Trainieren eines neuronalen Netzwerks

Welchen Unterschied macht es, wenn Sie ein neuronales Netzwerk trainieren: Batchgröße auf und Anzahl der Iterationen aufbeinaabbb Batch-Größe auf und Anzahl der Iterationen aufdcccddd wo ?a b = c dab=cd ab = cd Um es anders auszudrücken: Angenommen, wir trainieren das neuronale Netzwerk mit der gleichen Anzahl von Trainingsbeispielen. Wie …

221 neural-networks train

14

Was sind die Unterschiede zwischen der Faktoranalyse und der Hauptkomponentenanalyse?

Es scheint, dass einige der statistischen Pakete, die ich verwende, diese beiden Konzepte zusammenfassen. Ich frage mich jedoch, ob es unterschiedliche Annahmen oder Datenformalitäten gibt, die zutreffen müssen, um übereinander verwendet zu werden. Ein echtes Beispiel wäre unglaublich nützlich.

214 pca factor-analysis

12

Was ist der Unterschied zwischen Data Mining, Statistik, maschinellem Lernen und KI?

Was ist der Unterschied zwischen Data Mining, Statistik, maschinellem Lernen und KI? Wäre es richtig zu sagen, dass es sich um vier Bereiche handelt, die versuchen, sehr ähnliche Probleme mit unterschiedlichen Ansätzen zu lösen? Was genau haben sie gemeinsam und wo unterscheiden sie sich? Wenn es eine Art Hierarchie zwischen …

208 machine-learning data-mining

3

Woher wissen Sie, dass Ihr maschinelles Lernproblem hoffnungslos ist?

Stellen Sie sich ein Standard-Szenario für maschinelles Lernen vor: Sie werden mit einem großen multivariaten Datensatz konfrontiert und haben ein ziemlich verschwommenes Verständnis davon. Was Sie tun müssen, ist, Vorhersagen über eine Variable zu treffen, die auf Ihren Vorstellungen basiert. Wie üblich bereinigen Sie die Daten, sehen sich beschreibende Statistiken …

207 machine-learning forecasting modeling model-selection forecastability

10

Wie würden Sie jemandem Kovarianz erklären, der nur den Mittelwert versteht?

... vorausgesetzt, ich kann ihr Wissen über die Varianz auf intuitive Weise erweitern ( "Varianz" intuitiv verstehen ) oder indem ich sage: Es ist der durchschnittliche Abstand der Datenwerte vom Mittelwert - und da die Varianz quadratisch ist Einheiten nehmen wir die Quadratwurzel, um die Einheiten gleich zu halten, und …

207 variance covariance intuition

5

Welches "Mittel" soll verwendet werden und wann?

Wir haben also das arithmetische Mittel (AM), das geometrische Mittel (GM) und das harmonische Mittel (HM). Ihre mathematische Formulierung ist ebenso bekannt wie die zugehörigen stereotypen Beispiele (z. B. das harmonische Mittel und seine Anwendung auf Probleme im Zusammenhang mit der Geschwindigkeit). Eine Frage, die mich schon immer fasziniert hat, …

197 mean

8

Algorithmen zur automatischen Modellauswahl

Ich möchte einen Algorithmus zur automatischen Modellauswahl implementieren. Ich denke über eine schrittweise Regression nach, aber alles wird funktionieren (es muss jedoch auf linearen Regressionen basieren). Mein Problem ist, dass ich keine Methodik oder Open-Source-Implementierung finden kann (ich woke in Java). Die Methodik, die ich vorhabe, wäre ungefähr so: Berechnen …

193 references feature-selection model-selection aic stepwise-regression

30

Was ist das beste einführende Lehrbuch für Bayes'sche Statistik?

Welches ist das beste Einführungsbuch für Bayes-Statistiken? Bitte ein Buch pro Antwort.

192 bayesian references

12

Wie kann ich nicht negative Daten einschließlich Nullen transformieren?

Wenn ich stark verzerrte positive Daten habe, nehme ich oft Protokolle. Aber was soll ich mit stark verzerrten, nicht negativen Daten machen, die Nullen enthalten? Ich habe zwei Transformationen gesehen: Log( x + 1 )log⁡(x+1)\log(x+1) mit der netten Funktion, dass 0 auf 0 abgebildet wird. Log( x + c )log⁡(x+c)\log(x+c) …

191 data-transformation large-data

4

Was berechnet die verborgene Schicht in einem neuronalen Netzwerk?

Ich bin mir sicher, dass viele Leute mit Links antworten werden, mit denen sie "Lassen Sie mich das für Sie googeln". Deshalb möchte ich sagen, dass ich versucht habe, dies herauszufinden. Bitte verzeihen Sie mir meinen Mangel an Verständnis hier, aber ich kann nicht herausfinden, wie Die praktische Implementierung eines …

187 machine-learning neural-networks nonlinear-regression

9

Wie fasse ich Daten nach Gruppen in R zusammen? [geschlossen]

Ich habe R Datenrahmen wie folgt: age group 1 23.0883 1 2 25.8344 1 3 29.4648 1 4 32.7858 2 5 33.6372 1 6 34.9350 1 7 35.2115 2 8 35.2115 2 9 35.2115 2 10 36.7803 1 ... Ich muss den Datenrahmen in der folgenden Form erhalten: group mean …

181 r data-transformation

15

Was ist ein Datenwissenschaftler?

Nachdem ich kürzlich mein Doktorandenprogramm in Statistik abgeschlossen hatte, hatte ich in den letzten Monaten begonnen, nach einer Arbeit im Bereich Statistik zu suchen. Fast jedes Unternehmen, das ich in Betracht zog, hatte eine Stellenanzeige mit der Berufsbezeichnung " Data Scientist ". Tatsächlich fühlte es sich so an, als wären …

181 terminology definition careers

4

Was ist die Stapelgröße im neuronalen Netzwerk?

Ich benutze Python Keras packagefür neuronales Netzwerk. Dies ist der Link . Ist batch_sizegleich der Anzahl von Testproben? Aus Wikipedia haben wir diese Informationen: In anderen Fällen kann das Auswerten des Summengradienten jedoch teure Auswertungen der Gradienten von allen Summandenfunktionen erfordern. Wenn der Trainingssatz riesig ist und keine einfachen Formeln …

175 neural-networks python terminology keras