首页 > 其他 > 详细

机器学习基石笔记:13 Hazard of Overfitting

时间:2019-05-01 17:32:47      阅读:145      评论:0      收藏:0      [点我收藏+]

原文地址:https://www.jianshu.com/p/f9de73aecd22

技术分享图片

引起过拟合的原因有:

  • 过度VC维(模型复杂度高) ------ 确定性噪声;
  • 随机噪声;
  • 有限的样本数量\(N\)

技术分享图片
技术分享图片

通过具体实验来看模型复杂度\(Q_f\)/确定性噪声、随机噪声\(\sigma^2\)、样本数量\(N\)对过拟合的影响:

技术分享图片
技术分享图片
技术分享图片
技术分享图片

避免过拟合的常用方法:

  • 从简单模型开始:降低模型复杂度;
  • data cleaning/data pruning:去noise;
  • data hinting(线索):增加样本数量;
  • regularization:正则化;
  • validation:验证。

技术分享图片
技术分享图片

机器学习基石笔记:13 Hazard of Overfitting

原文:https://www.cnblogs.com/cherrychenlee/p/10800212.html

(0)
(0)
   
举报
评论 一句话评论(0
关于我们 - 联系我们 - 留言反馈 - 联系我们:wmxa8@hotmail.com
© 2014 bubuko.com 版权所有
打开技术之扣,分享程序人生!