《精》信息导论-第6讲-信源熵.pptVIP

2.3 连续信源 2.3.1 一些基本概念 2.3.2 连续信源的熵 2.3.3 几种特殊连续信源的熵 2.3.4 连续熵的性质 2.3.5 最大连续熵定理 2.3.6 熵功率 2.3.1 一些基本概念 (1) 连续信源定义 (2) 随机过程及其分类 (3) 通信系统中的信号 (4) 平稳遍历的随机过程 (1) 连续信源定义 连续信源：输出消息在时间和取值上都连续的信源。 例子：语音、电视等。 连续信源输出的消息是随机的，与随机过程{x(t)}相对应。可用有限维概率密度函数描述。 (2) 随机过程及其分类 ① 随机过程 ② 随机过程的分类 ① 随机过程 随机过程定义：随机过程{x(t)}可以看成由一系列时间函数xi(t)所组成，其中i=1,2,3,…，并称xi(t)为样本函数。 每个样本函数是随机过程的一个实现； 每个样本函数不仅在时间上，而且在幅度取值上都是连续变化的波形。 在某一固定的瞬时时刻t=ti，各个样本函数的取值，成为一个连续型的随机变量Xti； 一般用n维概率密度函数族pn(x1,x2,…,xn,t1,t2,…,tn)来描述随机过程的统计特性，n越大，描述越完善； 消息数是无限的。输出的每个可能的消息是随机过程{x(t)}中的一个样本函数。对于样本函数来说，它是时间t的连续函数，时间的取值为不可数的无限多个。另外，当固定某一瞬时t=tk时，信源的输出是一个随机变量X，