【求教】【集成学习】请问针对Adaboost、GBDT等集成学习:
(1)同一个特征是否可以入模多次?
(2)同一棵树上是否可以入模多次?
(3)如果可以多次入模,是不是容易过拟合?
(4)Sklearn的Adaboost或GBDT实现中,一个特征是否是多次入模的?
1个回答
(1)同一个特征是否可以入模多次?
可以的。
(2)同一棵树上是否可以入模多次?
可以的。但是binary feature不行。参考:决策树的深度和数据特征个数的关系
(3)如果可以多次入模,是不是容易过拟合?
是否过拟合和同一特征被选择的次数无关。
(4)Sklearn的Adaboost或GBDT实现中,一个特征是否是多次入模的?
是的。可能多次也可能零次。
SofaSofa数据科学社区DS面试题库 DS面经
那请问binary feature在不同的树上也只能使用一次吗?
-
vonta
2019-08-01 19:08
binary feature可以出现在不同的树上的。
-
zl_pku
2019-08-01 22:06
非常感谢
-
vonta
2019-08-02 15:33