当前位置: 首页>>机器学习>>正文


信息论常用概念

丹阳 机器学习, 算法&结构 , 去评论

摘要:信息量/熵/信息增益/互信息/交叉熵

本文转自:http://www.cnblogs.com/zhangchaoyang/articles/2655785.html ,对机器学习相关的信息论基本概念做了总结,值得翻阅,不过文章中认为信息增益等同于互信息,交叉熵等同与KL距离,这个根据相关的资料来看,并不完全一样。

13

本文由《纯净的天空》出品。文章地址: https://vimsky.com/article/112.html,未经允许,请勿转载。