【机器学习算法专题(蓄力计划)】十五、机器学习中玄乎的最大熵原理及模型
发布日期:2021-07-01 02:10:56 浏览次数:2 分类:技术文章

本文共 251 字,大约阅读时间需要 1 分钟。

文章目录

玄乎的“最大熵原理”

下面我来尝试解释一下这个概念。

我们了解:熵,就是混乱的意思。

在面对未知时,我们眼前的情况是十分混乱的 - 这个时候的熵值极大。然后我们会通过慢慢地收集数据和信息,慢慢地去分析,来一点一点地将熵降低。

最大熵模型 (maximization entropy model) 也是经典的分类算法,和逻辑回归模型一样,最大熵模型也属于对数线性模型。最大熵模型的学习和支持向量机类似,都转化为约束最优化问题。

最大熵原理

最大熵的思想很朴素,即将已知事实以外的未知部分看做“等

转载地址:https://maoli.blog.csdn.net/article/details/115922049 如侵犯您的版权,请留言回复原文章的地址,我们会给您删除此文章,给您带来不便请您谅解!

上一篇:【机器学习算法专题(蓄力计划)】十六、机器学习中贝叶斯分类算法
下一篇:【机器学习算法专题(蓄力计划)】十四、机器学习中逻辑回归

发表评论

最新留言

很好
[***.229.124.182]2024年04月30日 09时21分16秒