倚天遇到屠龙:LightGBM VS xgboost谁才是最强的梯度提升库?
更多深度文章,请关注云计算频道:https://yq.aliyun.com/cloud 作者介绍:Laurae,数据科学爱好者 Blog:https://medium.com/@Laurae2 背景知识: XGBoost是一款经过优化的分布式梯度提升(Gradient Boosting)库,具有高效,灵活和高可移植性的特点。基于梯度提升框架,XGBoost实现了并行方式的决策树提升(Tree Boosting),从而能够快速准确地解决各种数据科学问题。 LightGBM(Light Gradient Boosting Machine)同样是一款基于决策树算法的分布式梯度提升框架。 这篇博客是关于LightGBM 和xgboost 的对比。实验使用了定制的博世数据集,结果显示,在速度上xgboost比LightGBM在慢了10倍,而我们还需要做一些其它方面的比较。 总体介绍 首先让我们来看一下这个图表,所有人都应该打起精神!!! 从图上我们可以看到,平均来说,LightGBM比xgboost 快11到15倍。 我们也注意到,随着线程数的增加,比率变小了。这也很容易解释,因为你不可能让线...

