数据思维(第2版) 课件 第3、4章-数据思维原理、数据思维模式.pptx

数据思维(第2版) 课件 第3、4章-数据思维原理、数据思维模式.pptx

;;?;?;Jaynes在《信息论与统计力学》中提出准则“在根据部分信息进行推理时,我们应使用的概率分布,必须是在服从所有已知观测数据的前提下,使熵函数取得最大值的那个概率分布。这是做出的仅有的无偏分配。使用其他任何分布,则相当于对未知的信息做了任意性的假设”。

这一理论称为最大熵原理。它为我们如何从满足约束条件的诸多相容分布中,挑选“最佳”、“最合理”的分布提供了一个选择标准。

在数学上,把最大熵原理表示为如下的优化问题:;3.1.2最大熵原理的内涵;最大熵理论和方法的应用范围非常广,目前它已经渗透到信息论、工程优化、气象学、热力学、统

文档评论(0)

1亿VIP精品文档

相关文档