xgboost展开到二阶导数有什么好处啊

  统计/机器学习 监督式学习    浏览次数: 195
1

xgboost展开到二阶导数有什么好处啊

 

GEASS   2018-09-01 16:00



   1个回答 
2

二阶导数收敛得快!

梁静茹的勇气   2018-09-05 10:58

那如果继续展开到三阶会不会收敛更快呢 - GEASS   2018-09-05 11:15
但是同时你也要考虑每次计算导数所花的时间,四阶收敛当然更快,但是计算四阶导数它本身肯定要比计算一阶导数要慢很多,这相当于是一个tradeoff。另外一方面,一阶导数是向量、二阶是矩阵、三阶就到了张量。张量这一块很多体系还没完整呢。 - 梁静茹的勇气   2018-09-05 11:34


  相关主题

为什么lightgbm比xgb快?   2回答

xgboost怎么调参?   8回答

stack多个xgboost效果并不理想   3回答

xgboost是怎么做到regularization的?   2回答

相比xgboost,GBDT有什么优势   2回答

xgboost中的参数min_child_weight是什么意思?   1回答

xgboost的FIT问题   1回答

把XGBRegressor保存到本地文件并调用   1回答

为啥Xgboost比GradientBoost好那么多?   5回答

训练值都是正的,xgboost regression却预测出负数?   4回答

xgboost可以做回归预测吗?   2回答

既然xgboost那么好,线性回归还有存在的价值吗?   7回答



回答问题时需要注意什么?

我们谢绝在回答前讲“生动”的故事。

我们谢绝“这么简单,你自己想”、“书上有的,你认真看”这类的回答;如果你认为对方的提问方式或者内容不妥,你可以直接忽略该问题,不用进行任何作答,甚至可以对该问题投反对票。

我们谢绝答非所问。

我们谢绝自己不会、硬要回答。

我们感激每一个用户在编写答案时的努力与付出!