Κατασκευαστικά, η AUC δεν μπορεί να είναι αρνητική. … Ακόμα κι αν η μπλε γραμμή είναι κάτω από την καμπύλη "τυχαίου μοντέλου" (η διαγώνιος), θα έχει θετική AUC.
Τι είναι η κακή βαθμολογία AUC;
Στατιστική Ανάλυση
Η περιοχή κάτω από τα αποτελέσματα της καμπύλης ROC (AUC) θεωρήθηκε εξαιρετική για τιμές AUC μεταξύ 0,9-1, καλό για τιμές AUC μεταξύ 0,8-0,9, δίκαιο για τιμές AUC μεταξύ 0,7-0,8, κακή για τις τιμές AUC μεταξύ 0,6-0,7 και απέτυχε για τιμές AUC μεταξύ 0,5-0,6.
Τι είναι μια αποδεκτή AUC;
ΠΕΡΙΟΧΗ ΚΑΤΩ ΤΗΝ ΚΑΜΠΥΛΗ ROC
Γενικά, μια AUC 0,5 υποδηλώνει καμία διάκριση (δηλαδή, ικανότητα διάγνωσης ασθενών με και χωρίς τη νόσο ή την πάθηση βάσει της εξέτασης), 0.7 έως 0,8 θεωρείται αποδεκτό, 0,8 έως 0,9 θεωρείται εξαιρετικό και περισσότερο από 0,9 θεωρείται εξαιρετικό.
Γιατί η AUC είναι κακή για τα μη ισορροπημένα δεδομένα;
Αν και χρησιμοποιείται ευρέως, το ROC AUC δεν είναι χωρίς προβλήματα. Για ανισόρροπη ταξινόμηση με σοβαρή απόκλιση και λίγα παραδείγματα κατηγορίας μειοψηφίας, η AUC ROC μπορεί να είναι παραπλανητική. Αυτό συμβαίνει επειδή ένας μικρός αριθμός σωστών ή εσφαλμένων προβλέψεων μπορεί να οδηγήσει σε μεγάλη αλλαγή στην καμπύλη ROC ή στη βαθμολογία ROC AUC.
Πρέπει η AUC να είναι υψηλή ή χαμηλή;
Η περιοχή κάτω από την καμπύλη (AUC) είναι το μέτρο της ικανότητας ενός ταξινομητή να διακρίνει μεταξύ των κλάσεων και χρησιμοποιείται ως σύνοψη της καμπύλης ROC. Όσο υψηλότερη είναι η AUC, τόσο καλύτερη είναι η απόδοση του μοντέλου στη διάκριση μεταξύ των θετικών και αρνητικών κλάσεων.
