Lasso和岭回归的正则项包含截距(常数项)吗?

  统计/机器学习 回归分析 监督式学习 损失函数    浏览次数:6736        分享
0

Lasso和岭回归的正则项包含截距(常数项)吗?

我看了公式(Lasso回归和岭回归的损失函数),感觉截距是包含在正则项里的,但不是太确定。

 

七号信仰   2018-08-16 22:37



   2个回答 
6

正则项的目的是约束变量的回归系数而不是intercept,所以是不应该包含intercept的。

另外一方面,题主的链接里的目标函数,应该都是针对数据已经中心化的情况。在这种情况下,截距已经是零了。


SofaSofa数据科学社区DS面试题库 DS面经

u_u   2018-08-19 11:40

2

正则项是不包括截距的。

SofaSofa数据科学社区DS面试题库 DS面经

maxroot   2018-08-17 11:39



  相关讨论

L0 norm 正则是什么意思?

正则项里的L1,L2是什么意思?

最小角回归是天然的LASSO化?正则化参数怎么体现?

为什么正则项通常都是用L1或者L2,而不是其他的?

如何理解“迭代步骤本身就是一个正则化的过程”

L1正则化和L2正则化的区别?L1为啥具有稀疏性?

L1范数回归与TV正则化哪个的回归效果更好?

为什么很少用L0范数惩罚正则项?

XGBoost损失函数中正则项的理解

如何简单理解正则化

  随便看看

Random Forest可以用来做聚类?

python里清除已经定义过的变量

回归问题中R方可以小于0吗?

回归中自变量和因变量的相关系数和回归系数(斜率)有什么关系?

为什么LASSO可以做特征选择,而Ridge却不行?