Метрики

RMSE

Корень из среднеквадратичной ошибки

актуальноТекущий рабочий стандарт

Корень из MSE — возвращает метрику в исходные единицы, сохраняя штраф за большие ошибки.

Ключевые тезисы

  • RMSE ≥ MAE всегда; их разрыв указывает на наличие крупных промахов.
  • Самая частая метрика в регрессионных соревнованиях.
  • Соответствует предположению о нормальном шуме.

Подробный разбор

2 подтем — раскройте любую, чтобы увидеть объяснение, формулы, примеры и интерактивные графики.

1

RMSE против MAE

Разрыв между ними — диагностический признак.

Обозначения
  • предсказание модели
  • истинное значение целевой переменной
  • число объектов в выборке
  • суммирование по всем перечисленным элементам

Равенство достигается только если все ошибки одинаковы по модулю. Большой разрыв означает, что есть небольшое число крупных промахов — стоит посмотреть на них отдельно в анализе ошибок.

Пример

MAE = 5, RMSE = 25 → почти вся ошибка сосредоточена в нескольких объектах. Это повод для сегментного анализа, а не для перебора гиперпараметров.

2

С чем сравнивать RMSE

Само по себе число ничего не значит.

  • Наивный прогноз: среднее (для таблиц) или последнее значение (для рядов).
  • Разброс цели: RMSE, равный стандартному отклонению , означает нулевую полезность модели.
  • Историческая ошибка процесса: если люди ошибаются на 15%, модель с 12% уже ценна.
Значение меньше 1 означает, что модель полезнее наивного бейзлайна

Связанные темы

Качество регрессии

MAE80%

Средняя абсолютная ошибка · Метрики

Среднее абсолютных отклонений — метрика в единицах целевой переменной, устойчивая к выбросам.

MSE80%

Среднеквадратичная ошибка · Метрики

Среднее квадратов ошибок: сильно штрафует большие отклонения.

MAPE80%

Средняя абсолютная процентная ошибка · Метрики

Относительная ошибка в процентах — удобна для сравнения рядов разного масштаба.

SMAPE80%

Симметричная MAPE · Метрики

Вариант MAPE с нормировкой на сумму факта и прогноза — частично лечит асимметрию.

80%

Коэффициент детерминации · Метрики

Доля дисперсии целевой переменной, объяснённая моделью, относительно константного прогноза.

Adjusted R²80%

Скорректированный R² · Метрики

R² со штрафом за число признаков — падает, если новый признак не приносит пользы.

Linear Regression80%

Линейная регрессия · Классическое машинное обучение

Предсказывает число как взвешенную сумму признаков. Самый интерпретируемый бейзлайн и основа для более сложных моделей.

Loss functions80%

Функции потерь · Глубокое обучение

Формализуют цель обучения. Выбор потерь важнее выбора архитектуры чаще, чем кажется.