LASSO是L1惩罚正则项
Ridge是L2惩罚正则项
这里的L1和L2具体是什么意思?有没有具体的计算公式?
1个回答
这里的L1和L2是指的向量范数的种类。
向量x=(x1,x2,⋯,xn)的L1范数表示为
∥x∥1=n∑i=1|xi|
比如说x=(3,−4),那么∥x∥1=3+4=7
向量x=(x1,x2,⋯,xn)的L2范数表示为
∥x∥2=√n∑i=1x2i
比如说x=(3,−4),那么∥x∥2=√32+42=5
这些范数在Lasso和Ridge中的具体体现,可以参考Ridge,Lasso目标函数的表达式
SofaSofa数据科学社区DS面试题库 DS面经