Обучение с учетом затрат в контролируемых моделях: расчеты и внедрение

Обучение с учетом затрат - это метод, используемый в моделях машинного обучения под наблюдением для обработки ситуаций, когда различные типы ошибок имеют разные последствия. Он включает в себя корректировку процесса обучения, чтобы минимизировать общую стоимость, а не только частоту ошибок. Этот подход особенно полезен в таких областях, как здравоохранение, обнаружение мошенничества и кредитный рейтинг, где стоимость неправильной классификации значительно варьируется.

Понимание матрицы затрат

Матрица затрат является фундаментальным компонентом в обучении, учитывающем затраты. Она определяет затраты, связанные с каждым типом результата прогнозирования, такие как истинные положительные, ложные положительные, ложные отрицательные и истинные отрицательные. При назначении различных затрат модель может определить приоритет минимизации наиболее дорогостоящих ошибок.

Например, в сценарии медицинской диагностики отсутствие заболевания (ложноотрицательное) может быть более дорогостоящим, чем ложная тревога (ложноположительное). Матрица затрат помогает закодировать эти приоритеты в процессе обучения.

Расчеты в экономически чувствительном обучении

Расчеты предполагают интеграцию матрицы затрат в объективную функцию модели. Вместо минимизации частоты ошибок модель минимизирует общую стоимость, которая представляет собой сумму индивидуальных издержек прогнозирования, взвешенных по их вероятностям.

Для двоичной классификации общая стоимость (С) может быть выражена как:

C = C_FP * FP + C_FN *FN + C_TP * TP + C_TN * TN

где C_XY представляет собой стоимость, связанную с каждым исходом предсказания, и FP, FN, TP, TN являются подсчётами ложных срабатываний, ложных отрицаний, истинных положительных и истинных отрицательных значений соответственно.

Стратегии осуществления

Внедрение экономически чувствительного обучения может быть достигнуто с помощью различных методов:

• Назначение более высоких весов для более дорогостоящих классов во время обучения.
• Изменение пороговых значений принятия решений: Изменение порогового значения вероятности в пользу менее дорогостоящих ошибок.
• Используя экономически чувствительные алгоритмы: Используй алгоритмы, разработанные для непосредственного включения матриц затрат.
• Данные выборки: Классы перевыборки или подвыборки на основе связанных с ними затрат.