XGBClassifier和XGBRegressor里的base_score有什么用?

  统计/机器学习 监督式学习 Python    浏览次数: 87
0

XGBClassifier和XGBRegressor里都有一个base_score变量,这个变量有什么用,需要设置吗?还是作为调参的选项?

 

wxjjnss   2018-11-06 08:46



   2个回答 
4

base_score就是总体的均值,对于二元分类问题,base_score就是1占据的比重;对于回归问题,base_score就是整体的均值。

如果样本有权重,base_score就应该设置为加权均值。

base_score相当于是迭代的初始的起点,如果设置base_score的话,并且设置为总体均值的话,应该能够起到加快收敛的效果,但是即使没有设置base_score,只要Learning rate适当,迭代步数够多,设置base_score与否也不影响最终结果。

SofaSofa数据科学社区 DS面经 问答 实战

chrisliang   2018-11-07 12:14

谢谢,既然这样的话,似乎不设置也不要紧 - wxjjnss   2018-11-15 11:18
2

base_score – The initial prediction score of all instances, global bias.

SofaSofa数据科学社区 DS面经 问答 实战

dizhouw2   2018-11-07 06:42



  相关主题

python里XGBClassifier怎么设置early stop?   1回答

xgboost的sklearn接口有n_estimators参数,xgboost原始接口没有这个参数?   1回答

XGBClassifier设置random_state报错   1回答

xgboost可以用sklearn里的GridSearchCV吗?   2回答

xgboost的FIT问题   1回答

xgboost中的参数min_child_weight是什么意思?   1回答

到底什么时候用lightgbm什么时候用xgb   1回答

为什么lightgbm比xgb快?   2回答

stack多个xgboost效果并不理想   4回答

xgboost怎么调参?   8回答

xgboost是怎么做到regularization的?   2回答

xgboost展开到二阶导数有什么好处啊   1回答



回答问题时需要注意什么?

我们谢绝在回答前讲“生动”的故事。

我们谢绝“这么简单,你自己想”、“书上有的,你认真看”这类的回答;如果你认为对方的提问方式或者内容不妥,你可以直接忽略该问题,不用进行任何作答,甚至可以对该问题投反对票。

我们谢绝答非所问。

我们谢绝自己不会、硬要回答。

我们感激每一个用户在编写答案时的努力与付出!