Τα διαστήματα εμπιστοσύνης μοντέλου παρέχουν μια σειρά εντός της οποίας η πραγματική απόδοση μοντέλου ή η τιμή παραμέτρου αναμένεται να πέσει με μια ορισμένη πιθανότητα.

Κατανόηση Διαστημάτων Εμπιστοσύνης

Ένα διάστημα εμπιστοσύνης είναι ένα στατιστικό εύρος που υπολογίζεται από τα δεδομένα που πιθανώς περιέχει την πραγματική τιμή παραμέτρου. Στην εκμάθηση μηχανών, αυτό μπορεί να αναφέρεται σε μετρήσεις όπως η ακρίβεια, η ακρίβεια, ή οι συντελεστές μοντέλου.

Βήματα για να Υπολογίσετε τα Διάστημα Εμπιστοσύνης

Ακολουθήστε αυτά τα βήματα για να υπολογίσετε τα διαστήματα εμπιστοσύνης για τις μετρήσεις μοντέλου:

  • Συλλέξτε δείγμα μετρικών επιδόσεων μοντέλου μέσω διασταυρούμενης επικύρωσης ή πολλαπλών δρομών.
  • Υπολογίστε τη μέση και τυπική απόκλιση του δείγματος.
  • Επιλέξτε ένα επίπεδο εμπιστοσύνης (π.χ., 95%).
  • Καθορίστε την κατάλληλη κρίσιμη τιμή από τη διανομή t ή τη διανομή z με βάση το μέγεθος του δείγματος και το επίπεδο εμπιστοσύνης.
  • Υπολογίστε το περιθώριο σφάλματος: κρίσιμη τιμή × (τυπική απόκλιση / ⁇ δείγμα μεγέθους).
  • Υπολογίστε το διάστημα εμπιστοσύνης ως: μέσο ± περιθώριο σφάλματος.

Παράδειγμα υπολογισμού

Ας υποθέσουμε ότι η ακρίβεια ενός μοντέλου αξιολογείται πάνω από 30 διαδρομές, με μέση ακρίβεια 85% και τυπική απόκλιση 3%. Για ένα επίπεδο εμπιστοσύνης 95%, η κρίσιμη τιμή από την t-διανομή είναι περίπου 2.045.

Το περιθώριο σφάλματος είναι: 2.045 × (3 / ⁇ 30) ⁇ 2.045 × 0.547 ⁇ 1,12%. Το διάστημα εμπιστοσύνης είναι 85% ± 1,12%, με αποτέλεσμα μια σειρά από 83,88% έως 86,12% περίπου.