集成学习

对xgboost和lightgbm的理解及其调参应该关注的点

这两个算法都是集成学习了分类回归树模型，先讨论是怎么集成的。集成的方法是 Gradient Boosting比如我要拟合一个数据如下： 第一次建了一个模型如上图中的折线，效果不是很理想，然后要新建一个