xgboost展开到二阶导数有什么好处啊

  统计/机器学习 监督式学习    浏览次数:6667        分享
1

xgboost展开到二阶导数有什么好处啊

 

GEASS   2018-09-01 16:00



   1个回答 
1

二阶导数收敛得快!

SofaSofa数据科学社区DS面试题库 DS面经

梁静茹的勇气   2018-09-05 10:58

那如果继续展开到三阶会不会收敛更快呢 - GEASS   2018-09-05 11:15
但是同时你也要考虑每次计算导数所花的时间,四阶收敛当然更快,但是计算四阶导数它本身肯定要比计算一阶导数要慢很多,这相当于是一个tradeoff。另外一方面,一阶导数是向量、二阶是矩阵、三阶就到了张量。张量这一块很多体系还没完整呢。 - 梁静茹的勇气   2018-09-05 11:34


  相关讨论

xgboost里的每棵树是不是等权重的?

到底什么时候用lightgbm什么时候用xgb

GBDT和XGBoost在叶子节点权重计算上有什么不同?

stack多个xgboost效果并不理想

xgboost怎么调参?

xgboost是怎么做到regularization的?

xgboost为什么会有seed?随机性体现在哪里?

为什么lightgbm比xgb快?

GBDT和XGBoost使用的都是回归树,原理上是怎么支持解决分类问题的?

xgboost中的参数min_child_weight是什么意思?

  随便看看

hyperparameter与parameter的区别?

dropout rate一般设置多大?

sklearn r2_score返回负数

在使用PCA降维时,有哪些坑?

鞍点的数学定义是什么?