Statistiken und Big Data auc

4

Ist AUC die Wahrscheinlichkeit, eine zufällig ausgewählte Instanz aus jeder Klasse korrekt zu klassifizieren?

Ich habe diese Bildunterschrift in einer Zeitung gelesen und noch nie irgendwo anders eine so beschriebene AUC gesehen. Ist das wahr? Gibt es einen Beweis oder eine einfache Möglichkeit, dies zu sehen? Fig. 2 zeigt die Vorhersagegenauigkeit dichotomer Variablen, ausgedrückt als Fläche unter der Empfänger-Betriebskennlinie (AUC), die der Wahrscheinlichkeit entspricht, …

10 classification roc auc

2

AUC in der ordinalen logistischen Regression

Ich verwende zwei Arten der logistischen Regression - eine ist die einfache Art für die binäre Klassifizierung und die andere ist die ordinale logistische Regression. Zur Berechnung der Genauigkeit der ersten habe ich eine Kreuzvalidierung verwendet, bei der ich die AUC für jede Falte berechnet und dann die mittlere AUC …

9 logistic cross-validation roc auc ordered-logit

3

Auswählen einer Klassifizierungsleistungsmetrik für die Modellauswahl, Merkmalsauswahl und Veröffentlichung

Ich habe einen kleinen, unausgeglichenen Datensatz (70 positiv, 30 negativ) und habe mit der Modellauswahl für SVM-Parameter unter Verwendung von BAC (ausgeglichene Genauigkeit) und AUC (Bereich unter der Kurve) herumgespielt. Ich habe verschiedene Klassengewichte für den C-Parameter in libSVM verwendet, um die unausgeglichenen Daten gemäß den hier angegebenen Anweisungen auszugleichen …

8 svm cross-validation model-selection auc

3

Ist das Modell mit höherer AUC am Testmuster besser als das nicht überpasste

Ich nehme an einer Herausforderung teil, bei der ich ein Modell erstellt habe, das 70% AUC am Zugset und 70% AUC am Hold-Out-Test-Set ausführt. Der andere Teilnehmer hat ein Modell erstellt, das 96% AUC am Zugset und 76% AUC am Hold-Out-Testset ausführt. Meiner Meinung nach ist mein Modell besser, weil …

7 validation overfitting model-comparison auc train

1

Ausreißererkennung: Bereich unter der Präzisionsrückrufkurve

Ich möchte Ausreißererkennungsalgorithmen vergleichen. Ich bin nicht sicher, ob der Bereich unter dem ROC oder unter der Präzisionsrückrufkurve das zu verwendende Maß ist. Ein schneller Test in Matlab bringt mir seltsame Ergebnisse. Ich versuche, die ROC- und PR-Werte für eine perfekte Klassifizierung zu erhalten: % true labels outlier = 1; …

7 machine-learning experiment-design roc precision-recall auc

Als «auc» getaggte Fragen