首页 > 其他 > 详细

梯度提升树中的负梯度和残差关系

时间:2018-11-01 16:46:40      阅读:198      评论:0      收藏:0      [点我收藏+]

我们希望找到一个 技术分享图片 使得 技术分享图片 最小,那么 技术分享图片 就得沿着使损失函数L减小的方向变化,即:

技术分享图片

同时,最新的学习器是由当前学习器 技术分享图片 与本次要产生的回归树 技术分享图片相加得到的:

技术分享图片

因此,为了让损失函数减小,需要令:

技术分享图片

即用损失函数对f(x)的负梯度来拟合回归树。

梯度提升树中的负梯度和残差关系

原文:https://www.cnblogs.com/duan-decode/p/9889955.html

(0)
(0)
   
举报
评论 一句话评论(0
关于我们 - 联系我们 - 留言反馈 - 联系我们:wmxa8@hotmail.com
© 2014 bubuko.com 版权所有
打开技术之扣,分享程序人生!