Logo bg.boatexistence.com

Защо ласото има тенденция към нулеви коефициенти?

Съдържание:

Защо ласото има тенденция към нулеви коефициенти?
Защо ласото има тенденция към нулеви коефициенти?

Видео: Защо ласото има тенденция към нулеви коефициенти?

Видео: Защо ласото има тенденция към нулеви коефициенти?
Видео: Веб-программирование — информатика для бизнес-лидеров 2016 2024, Може
Anonim

Ласото извършва свиване, така че да има "ъгли" в ограничението, което в две измерения съответства на диамант. Ако сборът от квадрати "уцели" един от тези ъгли, тогава коефициентът, съответстващ на оста, се свива до нула. … Следователно ласото извършва свиване и (ефективно) избор на подмножество.

Защо ласото дава нулеви коефициенти?

Ласото извършва свиване, така че да има "ъгли" в ограничението, което в две измерения съответства на диамант. Ако сборът от квадрати "уцели" един от тези ъгли, тогава коефициентът, съответстващ на оста, се свива до нула.

Защо ласото се свива до нула, но не и Ridge?

Казва се, че тъй като формата на ограничението в LASSO е диамант, полученото решение на най-малките квадрати може да докосне ъгъла на диаманта, така че да доведе до свиване на някаква променлива. Въпреки това, при регресия на билото, тъй като това е кръг, той често няма да докосва оста

Защо коефициентите на регресия на хребета се свиват?

Ридж регресия свива всички коефициенти на регресия до нула; ласото има тенденция да даде набор от нулеви коефициенти на регресия и води до рядко решение. Имайте предвид, че както за регресия на хребета, така и за ласото коефициентите на регресия могат да се движат от положителни към отрицателни стойности, тъй като се свиват към нула.

Изместени ли са коефициентите на ласо?

…свиването на ласото кара оценките на ненулевите коефициенти да бъдат отклонени към нула и като цяло те не са последователни [Добавена бележка: Това означава, че като размерът на извадката нараства, оценките на коефициентите не се сближават].

Препоръчано: