Data Science machine-learning

3

Eine Hot-Codierung für eine große Anzahl von Werten

Wie verwenden wir eine Hot-Codierung, wenn die Anzahl der Werte, die eine kategoriale Variable annehmen kann, groß ist? In meinem Fall sind es 56 Werte. Wie üblich müsste ich dem Trainingsdatensatz 56 Spalten (56 Binärmerkmale) hinzufügen, was die Komplexität und damit die Trainingszeit immens erhöht. Wie gehen wir mit solchen …

7 machine-learning data-mining classification dataset categorical-data

5

Covariate Shift Detection

Gibt es einen Standardansatz zur Erkennung der kovariaten Verschiebung zwischen Trainings- und Testdaten? Dies wäre nützlich, um die Annahme zu bestätigen, dass in meiner Datenbank, die einige hundert Bilder enthält, eine kovariate Verschiebung vorliegt.

7 machine-learning classification dataset image-classification

2

Unterschied zwischen Trainings- und Testdatenverteilung

Eine Grundannahme beim maschinellen Lernen ist, dass Trainings- und Testdaten aus derselben Population stammen und somit derselben Verteilung folgen. In der Praxis ist dies jedoch höchst unwahrscheinlich. Covariate Shift behebt dieses Problem. Kann jemand die folgenden Zweifel daran klären? Wie prüft man, ob zwei Verteilungen statistisch unterschiedlich sind? Kann die …

7 machine-learning classification dataset image-classification

3

Vorlagen mit Parametern in Textfragmenten identifizieren

Ich habe einen Datensatz mit Textfragmenten mit einer festen Struktur, die Parameter enthalten kann. Beispiele sind: Temperature today is 20 centigrades Temperature today is 28 centigrades oder Her eyes are blue and hair black. Her eyes are green and hair brown. Das erste Beispiel zeigt eine Vorlage mit einem numerischen …

7 machine-learning r nlp

1

Projizieren von Daten von nach

Ich habe wenige Punkte in , dh die in eingebettete dimensionale Einheitskugel , und ich möchte sie auf , dh die 2-dimensionale , projizieren Einheitskugel (eingebettet in ), um sie mit der Einschränkung zu visualisieren, dass benachbarte Punkte in der Nähe sein sollten. Ich habe einige Zeit mit t-sne gespielt, …

7 machine-learning dimensionality-reduction visualization

1

Warum gibt die logistische Regression in Spark und R unterschiedliche Modelle für dieselben Daten zurück?

Ich habe die logistischen Regressionsmodelle für R ( glm) und Spark ( LogisticRegressionWithLBFGS) mit einem Datensatz von 390 obs verglichen . von 14 Variablen. Die Ergebnisse sind im Achsenabschnitt und in den Gewichten völlig unterschiedlich. Wie kann man das erklären? Hier sind die Ergebnisse von Spark (LogisticRegressionWithLBFGS): model.intercept : 1.119830027739959 …

7 machine-learning r logistic-regression apache-spark

4

Wie hängt Data Science mit maschinellem Lernen zusammen?

Ich habe diesen Vergleich der analytischen Disziplinen und diese Perspektive des maschinellen Lernens durchlaufen , aber ich finde keine Antworten auf Folgendes: Wie hängt Data Science mit maschinellem Lernen zusammen? Wie hängt es nicht mit maschinellem Lernen zusammen?

7 machine-learning definitions knowledge-base

3

Warum führt die Anwendung von PCA auf Ziele zu einer Unteranpassung?

Das Ziel: Ich bin neu im maschinellen Lernen und Experimentieren mit neuronalen Netzen. Ich möchte ein Netzwerk aufbauen, das eine Reihe von 5 Bildern als Eingabe verwendet und das nächste Bild vorhersagt. Mein Datensatz ist nur für meine Experimente völlig künstlich. Zur Veranschaulichung hier einige Beispiele für Eingabe und erwartete …

7 machine-learning neural-network

1

Wie extrahiere ich Funktionen und klassifiziere Warn-E-Mails, die von Überwachungstools stammen, in die richtige Kategorie?

Mein Unternehmen bietet vielen seiner Kunden Managed Services an. Unsere Kunden verwenden normalerweise die folgenden Überwachungstools, um ihre Server / Webanwendungen zu überwachen: OpsView Nagios Pingdom Benutzerdefinierte Shell-Skripte Immer wenn ein Problem gefunden wird, geht eine Benachrichtigungsmail an unser Ops-Team, damit es das Problem beheben kann. Da wir Tausende von …

7 machine-learning classification clustering feature-extraction

1

Wie geht der naive Bayes-Klassifikator mit fehlenden Daten im Training um?

Naive Bayes geht offenbar unterschiedlich mit fehlenden Daten um, je nachdem, ob sie in Trainings- oder Test- / Klassifizierungsinstanzen vorhanden sind. Bei der Klassifizierung von Instanzen wird das Attribut mit dem fehlenden Wert einfach nicht in die Wahrscheinlichkeitsberechnung einbezogen ( http://www.inf.ed.ac.uk/teaching/courses/iaml/slides/naive-2x2.pdf ). Im Training "ist die Instanz [mit den fehlenden …

7 machine-learning data-mining classification naive-bayes-classifier

5

Wo soll man in neuronalen Netzen anfangen?

Zunächst einmal weiß ich, dass die Frage möglicherweise nicht für die Website geeignet ist, aber ich würde es wirklich begrüßen, wenn Sie mir nur einige Hinweise geben würden. Ich bin ein 16-jähriger Programmierer, habe Erfahrung mit vielen verschiedenen Programmiersprachen. Vor einiger Zeit habe ich einen Kurs bei Coursera mit dem …

7 machine-learning neural-network svm

1

Lineare Regression in R Mapreduce (RHadoop)

Ich bin neu bei RHadoop und auch bei RMR ... Ich musste einen Mapreduce-Job in R Mapreduce schreiben. Ich habe versucht zu schreiben, aber während der Ausführung gibt es einen Fehler. Versuchen Sie, die Datei von hdfs zu lesen Error: Error in mr(map = map, reduce = reduce, combine = …

7 machine-learning r apache-hadoop map-reduce

Als «machine-learning» getaggte Fragen