首页 > 其他 > 详细

机器学习笔记09-----决策树与随机森林1---决策树概述

时间:2020-04-11 13:39:56      阅读:112      评论:0      收藏:0      [点我收藏+]

1.主要内容

技术分享图片

 

案例引出:

技术分享图片

技术分享图片

2.条件熵

 

定义:

技术分享图片

技术分享图片

条件熵的定义式推导:

 

技术分享图片

技术分享图片

技术分享图片

上图以出去打网球的案例为例,根节点的熵是大于0的,最底层的子节点的熵是等于0的,以信息熵为度量,构造一颗熵值下降最快的树

3.决策树

(1)决策树的样式

技术分享图片

(2)决策树的定义

技术分享图片

(3)决策树算法的特点

技术分享图片

 

(4)生成决策树的算法

技术分享图片

 

(5)互信息

技术分享图片

 

(6)信息增益

技术分享图片

 

技术分享图片

技术分享图片

(7)决策树三种算法总结

技术分享图片

(8)决策树的评价

技术分享图片

 

机器学习笔记09-----决策树与随机森林1---决策树概述

原文:https://www.cnblogs.com/luckyplj/p/12678829.html

(0)
(0)
   
举报
评论 一句话评论(0
关于我们 - 联系我们 - 留言反馈 - 联系我们:wmxa8@hotmail.com
© 2014 bubuko.com 版权所有
打开技术之扣,分享程序人生!