Data Science

4

Visualisierung von häufig zusammen gekauften Artikeln

Ich habe einen Datensatz in folgender Struktur in eine CSV-Datei eingefügt: Banana Water Rice Rice Water Bread Banana Juice Jede Zeile zeigt eine Sammlung von Artikeln an, die zusammen gekauft wurden. Zum Beispiel zeigt die erste Zeile , dass die Elemente Banana, Water, und Ricezusammen gekauft wurden. Ich möchte eine …

10 python r data-mining visualization association-rules

3

Ist TensorFlow eine vollständige Bibliothek für maschinelles Lernen?

Ich bin neu in TensorFlow und muss die Funktionen und Mängel von TensorFlow verstehen, bevor ich es verwenden kann. Ich weiß, dass es sich um ein Deep-Learning-Framework handelt, aber abgesehen von dem, was andere Algorithmen für maschinelles Lernen mit Tensorfluss verwenden können. Können wir beispielsweise mit TensorFlow SVMs oder zufällige …

10 machine-learning

5

Dimensionssprung beim maschinellen Lernen

Was ist das Problem des Dimensionssprungs beim maschinellen Lernen (das in Faltungs-Neuronalen Netzen und bei der Bilderkennung auftritt)? Ich habe darüber gegoogelt, aber alles, was ich bekomme, sind Informationen über die Physik der Materialformverformung. Es ist für mich hilfreicher, wenn jemand dies anhand eines Beispiels zum maschinellen Lernen erklärt. Kann …

10 machine-learning image-recognition

1

Umformung von Daten für Deep Learning mit Keras

Ich bin ein Anfänger von Keras und habe mit dem MNIST-Beispiel begonnen, um zu verstehen, wie die Bibliothek tatsächlich funktioniert. Das Codefragment des MNIST-Problems im Keras-Beispielordner lautet wie folgt: import numpy as np np.random.seed(1337) # for reproducibility from keras.datasets import mnist from keras.models import Sequential from keras.layers import Dense, Dropout, …

10 python neural-network deep-learning keras

3

Wann sollten wir einen Datensatz als unausgewogen betrachten?

Ich bin mit einer Situation konfrontiert, in der die Anzahl der positiven und negativen Beispiele in einem Datensatz unausgewogen ist. Meine Frage ist, gibt es Faustregeln, die uns sagen, wann wir die große Kategorie unterabtasten sollten, um eine Art Ausgleich im Datensatz zu erzwingen. Beispiele: Wenn die Anzahl der positiven …

10 classification dataset sampling class-imbalance

3

Sind Word2Vec und Doc2Vec sowohl Verteilungsdarstellung als auch verteilte Darstellung?

Ich habe gelesen, dass die Verteilungsdarstellung auf der Verteilungshypothese basiert, dass Wörter, die in einem ähnlichen Kontext vorkommen, tendenziell ähnliche Bedeutungen haben. Word2Vec und Doc2Vec werden beide gemäß dieser Hypothese modelliert. Aber in der Originalarbeit sind sogar sie als Distributed representation of words and phrasesund betitelt Distributed representation of sentences …

10 nlp word-embeddings terminology word2vec

2

Python Machine Learning / Data Science Projektstruktur

Ich suche nach Informationen darüber, wie ein Python Machine Learning-Projekt organisiert werden soll. Für Python übliche Projekte gibt es Cookiecutter und für R ProjectTemplate . Dies ist meine aktuelle Ordnerstruktur, aber ich mische Jupyter Notebooks mit tatsächlichem Python-Code und es scheint nicht sehr klar zu sein. . ├── cache ├── …

10 python

2

Tools zur automatischen Erkennung von Anomalien in einer SQL-Tabelle?

Ich habe eine große SQL-Tabelle, die im Wesentlichen ein Protokoll ist. Die Daten sind ziemlich komplex und ich versuche einen Weg zu finden, um Anomalien zu identifizieren, ohne dass ich alle Daten verstehe. Ich habe viele Tools für die Erkennung von Anomalien gefunden, aber die meisten erfordern eine Art "Mittelsmann", …

10 sql anomaly-detection outlier

3

Ist die Richtung der Kanten in einem Bayes-Netzwerk irrelevant?

In einer Vorlesung wurde heute behauptet, dass die Richtung der Kanten in einem Bayes-Netzwerk keine Rolle spielt. Sie müssen keine Kausalität darstellen. Es ist offensichtlich, dass Sie in einem Bayes-Netzwerk keine einzelne Kante wechseln können. Zum Beispiel sei mit V = { v 1 , v 2 , v 3 …

10 bayesian-networks

2

ggvis vs. ggplot2 + Shiny; welches für die interaktive Visualisierung wählen?

Es gibt eine ähnliche Frage hier in CrossValidated, und ich habe die Antworten gelesen. Meine Frage ist etwas anders. Ich möchte nicht nur meine Daten visualisieren, und tatsächlich ist das, was ich visualisieren möchte, mit beiden Paketen nicht einfach zu visualisieren. Ich habe zwei Punktmengen ( Koordinaten) auf meinem Plot. …

10 r visualization ggplot2

1

Konvergenz in der Hartigan-Wong k-means-Methode und anderen Algorithmen

Ich habe versucht, die verschiedenen k-means Clustering-Algorithmen zu verstehen, die hauptsächlich im statsPaket der RSprache implementiert sind . Ich verstehe den Lloyd's-Algorithmus und den MacQueen-Online-Algorithmus. Ich verstehe sie wie folgt: Lloyd's Algorithmus: Zunächst werden 'k'-Zufallsbeobachtungen ausgewählt, die als Schwerpunkte der' k'-Cluster dienen. Dann treten die folgenden Schritte in der Iteration …

10 r clustering k-means

2

Softwaretests für Data Science in R.

Ich benutze oft Nose, Tox oder Unittest , um meinen Python-Code zu testen, insbesondere wenn er in andere Module oder andere Codeteile integriert werden muss. Jetzt, da ich R mehr als Python für die ML-Modellierung und -Entwicklung verwendet habe. Mir wurde klar, dass ich meinen R-Code nicht wirklich teste (und …

10 r software-development

2

Wie lernen KI zu handeln, wenn der Problembereich zu groß ist?

Ich lerne am besten durch Experimente und Beispiele. Ich lerne etwas über neuronale Netze und habe (was ich denke) ein ziemlich gutes Verständnis für Klassifikation und Regression sowie über überwachtes und unbeaufsichtigtes Lernen, aber ich bin auf etwas gestoßen, das ich nicht ruhig herausfinden kann. Wenn ich eine KI trainieren …

10 machine-learning neural-network

1

Text-Klassifizierungs-Problem: Ist Word2Vec / NN der beste Ansatz?

Ich möchte ein System entwerfen, das einen bestimmten Textabschnitt kategorisieren und den Kontext identifizieren kann: Wird mit benutzergenerierten Textabschnitten (wie Kommentaren / Fragen / Antworten) geschult. Jeder Gegenstand im Trainingssatz wird mit markiert. Also zum Beispiel ("Kategorie 1", "Textabsatz") Es wird Hunderte von Kategorien geben Was wäre der beste Ansatz, …

10 neural-network text-mining multiclass-classification word-embeddings

1

Serverprotokollanalyse mit maschinellem Lernen

Mir wurde diese Aufgabe zugewiesen, um die Serverprotokolle unserer Anwendung zu analysieren, die Ausnahmeprotokolle, Datenbankprotokolle, Ereignisprotokolle usw. enthalten. Ich bin neu im maschinellen Lernen. Wir verwenden Spark mit elastischer Suche und Sparks MLlib (oder PredictionIO). Ein Beispiel für das gewünschte Das Ergebnis wäre, anhand der gesammelten Ausnahmeprotokolle vorhersagen zu können, …

10 machine-learning predictive-modeling apache-spark