⏯Зачем использовать функции потерь, нечувствительные к масштабу ошибки, например Huber loss, вместо стандартной MSE в регрессии
Среднеквадратичная ошибка (MSE) сильно штрафует большие отклонения, из-за чего становится очень чувствительной к выбросам. Один аномальный объект может доминировать в градиентах и «утащить» всю модель.
Huber loss — это гибрид MSE и MAE: ❇️При малых ошибках она ведёт себя как MSE — гладко и удобно для градиентных методов. ❇️При больших — как MAE, линейно, не позволяя выбросам слишком сильно влиять на обучение.
Это особенно полезно, когда: ❇️Данные содержат редкие, но сильные шумы (например, сенсоры, человеческие ошибки, аномалии). ❇️Вы хотите получить модель, устойчивую к искажениям, но всё ещё удобную для оптимизации.
⏯Зачем использовать функции потерь, нечувствительные к масштабу ошибки, например Huber loss, вместо стандартной MSE в регрессии
Среднеквадратичная ошибка (MSE) сильно штрафует большие отклонения, из-за чего становится очень чувствительной к выбросам. Один аномальный объект может доминировать в градиентах и «утащить» всю модель.
Huber loss — это гибрид MSE и MAE: ❇️При малых ошибках она ведёт себя как MSE — гладко и удобно для градиентных методов. ❇️При больших — как MAE, линейно, не позволяя выбросам слишком сильно влиять на обучение.
Это особенно полезно, когда: ❇️Данные содержат редкие, но сильные шумы (например, сенсоры, человеческие ошибки, аномалии). ❇️Вы хотите получить модель, устойчивую к искажениям, но всё ещё удобную для оптимизации.
SUCK Channel Telegram Telegram offers a powerful toolset that allows businesses to create and manage channels, groups, and bots to broadcast messages, engage in conversations, and offer reliable customer support via bots. “[The defendant] could not shift his criminal liability,” Hui said. Don’t publish new content at nighttime. Since not all users disable notifications for the night, you risk inadvertently disturbing them. Although some crypto traders have moved toward screaming as a coping mechanism, several mental health experts call this therapy a pseudoscience. The crypto community finds its way to engage in one or the other way and share its feelings with other fellow members.
from us