集成学习通过组合多个基模型来提高整体性能，常见的方法有随机森林、梯度提升树和Bagging。Lasso回归是一种线性回归的正则化方法，不属于集成学习。