Метрики

MAE

Средняя абсолютная ошибка

актуальноТекущий рабочий стандарт

Среднее абсолютных отклонений — метрика в единицах целевой переменной, устойчивая к выбросам.

Что означает каждый компонент
  • среднее по объектам
  • ошибка на объекте
  • модуль вместо квадрата: все ошибки весят пропорционально размеру, выбросы не доминируют

Ключевые тезисы

  • Оптимальный прогноз при MAE — медиана, а не среднее.
  • Легко объясняется бизнесу: «в среднем ошибаемся на N единиц».
  • Недифференцируема в нуле, что чуть усложняет оптимизацию.

Подробный разбор

2 подтем — раскройте любую, чтобы увидеть объяснение, формулы, примеры и интерактивные графики.

1

Свойства и интерпретация

Понятная бизнесу метрика в единицах целевой переменной.

Обозначения
  • предсказание модели
  • истинное значение целевой переменной
  • число объектов в выборке
  • суммирование по всем перечисленным элементам

Оптимальный постоянный прогноз при MAE — медиана, а не среднее. Это делает метрику устойчивой к выбросам: один аномальный объект не сдвинет решение.

Пример

Прогноз спроса ошибается в среднем на 12 единиц — это MAE. Такое число можно сразу перевести в деньги: 12 единиц × стоимость хранения.

2

Когда выбирать MAE

Три признака того, что квадратичная ошибка вам вредит.

  • В данных есть редкие экстремальные значения, которые вы не обязаны предсказывать точно.
  • Бизнесу важна типичная ошибка, а не худший случай.
  • Целевая переменная скошена (доходы, длительности, чеки).
На практике

Если крупные промахи всё же дороги, но выбросы мешают, берите Huber: квадратичный штраф вблизи нуля и линейный на хвостах.

Связанные темы

Качество регрессии

MSE80%

Среднеквадратичная ошибка · Метрики

Среднее квадратов ошибок: сильно штрафует большие отклонения.

RMSE80%

Корень из среднеквадратичной ошибки · Метрики

Корень из MSE — возвращает метрику в исходные единицы, сохраняя штраф за большие ошибки.

MAPE80%

Средняя абсолютная процентная ошибка · Метрики

Относительная ошибка в процентах — удобна для сравнения рядов разного масштаба.

SMAPE80%

Симметричная MAPE · Метрики

Вариант MAPE с нормировкой на сумму факта и прогноза — частично лечит асимметрию.

80%

Коэффициент детерминации · Метрики

Доля дисперсии целевой переменной, объяснённая моделью, относительно константного прогноза.

Adjusted R²80%

Скорректированный R² · Метрики

R² со штрафом за число признаков — падает, если новый признак не приносит пользы.

Linear Regression80%

Линейная регрессия · Классическое машинное обучение

Предсказывает число как взвешенную сумму признаков. Самый интерпретируемый бейзлайн и основа для более сложных моделей.

Loss functions80%

Функции потерь · Глубокое обучение

Формализуют цель обучения. Выбор потерь важнее выбора архитектуры чаще, чем кажется.