XGBoost：XGBoost模型解释与可视化教程.docx

PAGE1

PAGE1

XGBoost：XGBoost模型解释与可视化教程

1XGBoost简介

1.11XGBoost的基本概念

XGBoost,即“ExtremeGradientBoosting”，是一种优化的分布式梯度提升决策树算法。它在GradientBoostingMachine（GBM）的基础上进行了许多改进，以提高模型的准确性和运行效率。XGBoost的核心思想是通过构建多个弱分类器（通常是决策树），并将它们组合成一个强分类器，以达到更优的预测效果。

1.1.1特点

正则化：XGBoost引入了正则化项来防止过拟合。

并行处理：虽然GBM是顺序构