⏯Зачем использовать функции потерь, нечувствительные к масштабу ошибки, например Huber loss, вместо стандартной MSE в регрессии
Среднеквадратичная ошибка (MSE) сильно штрафует большие отклонения, из-за чего становится очень чувствительной к выбросам. Один аномальный объект может доминировать в градиентах и «утащить» всю модель.
Huber loss — это гибрид MSE и MAE: ❇️При малых ошибках она ведёт себя как MSE — гладко и удобно для градиентных методов. ❇️При больших — как MAE, линейно, не позволяя выбросам слишком сильно влиять на обучение.
Это особенно полезно, когда: ❇️Данные содержат редкие, но сильные шумы (например, сенсоры, человеческие ошибки, аномалии). ❇️Вы хотите получить модель, устойчивую к искажениям, но всё ещё удобную для оптимизации.
⏯Зачем использовать функции потерь, нечувствительные к масштабу ошибки, например Huber loss, вместо стандартной MSE в регрессии
Среднеквадратичная ошибка (MSE) сильно штрафует большие отклонения, из-за чего становится очень чувствительной к выбросам. Один аномальный объект может доминировать в градиентах и «утащить» всю модель.
Huber loss — это гибрид MSE и MAE: ❇️При малых ошибках она ведёт себя как MSE — гладко и удобно для градиентных методов. ❇️При больших — как MAE, линейно, не позволяя выбросам слишком сильно влиять на обучение.
Это особенно полезно, когда: ❇️Данные содержат редкие, но сильные шумы (например, сенсоры, человеческие ошибки, аномалии). ❇️Вы хотите получить модель, устойчивую к искажениям, но всё ещё удобную для оптимизации.
3How to create a Telegram channel? Telegram Channels requirements & features Activate up to 20 bots To view your bio, click the Menu icon and select “View channel info.” Avoid compound hashtags that consist of several words. If you have a hashtag like #marketingnewsinusa, split it into smaller hashtags: “#marketing, #news, #usa.
from us