Bộ nhận tính cách (ROC) và Vùng dưới trình điều khiển (AUC) là những thước đo quan trọng được dùng để đánh giá hiệu suất của mô hình phân loại giám sát. Họ giúp hiểu một mô hình phân biệt tốt giữa các lớp qua các ngưỡng khác nhau như thế nào.

Hiểu cong ROC

Đường cong ROC vẽ một biểu đồ tỷ lệ dương thực (cảm nhận) đối với tỷ lệ dương tiêu cực (- chi tiết) sai ở nhiều ngưỡng khác nhau. Nó cung cấp một hình ảnh đại diện cho khả năng phân biệt giữa các lớp dương và tiêu cực.

Tính toán AUC

Vùng dưới cong (AUC) định lượng tổng thể khả năng phân biệt giữa các lớp. Một khu vực có 0.5 cho thấy không có khả năng phân loại, tương đương với đoán ngẫu nhiên. Một xác suất của 1. 0 có nghĩa là phân loại hoàn hảo.

Giải thích về ROC và AUC

Khi so sánh mô hình với AUC cao hơn thường được ưa thích hơn, nhưng quan trọng là xem xét các quy định về ngữ cảnh và cụ thể của ứng dụng.

Những sự suy xét thực tế

ROC và AUC là hữu ích nhất khi các lớp cân bằng. trong trường hợp của bộ dữ liệu bị mất cân bằng, các số đo khác như đường cong gọi chính xác có thể cung cấp sự hiểu biết sâu sắc hơn.