信息论与编码课件第二章.pptVIP

离散信源符号的信息量 打个比方：举重运动员的体重好比平均功率，举起的重量好比熵功率，这样同一级别举重比赛就相当于在平均功率相同的条件下看谁的熵功率大。 * * * * 注意大小写代表的不同含义；任何概率分布要满足完备性；灵活应用关系式；计算结果要与概念符合 * 注意大小写代表的不同含义；任何概率分布要满足完备性；灵活应用关系式；计算结果要与概念符合 * 注意大小写代表的不同含义；任何概率分布要满足完备性；灵活应用关系式；计算结果要与概念符合 马尔可夫信源 定义 2.17 若信源输出的符号序列和信源所处的状态满足下列两个条件： （1）某一时刻信源符号的输出只与此刻信源所处的状态有关，而与以前的状态及以前的输出符号无关。即 当具有时齐性时，即有 及 （2）信源某l时刻所处的状态由当前的输出符号和前一时刻 信源的状态唯一决定，即 （即已知前一时刻信源状态及当前输出符号，则当前信源状态是确定的，或者说取某个状态的概率为1，取其他状态的概率为0） 则此信源称为马尔可夫信源。 马尔可夫信源 定义 2.18 m 阶有记忆离散信源的数学模型可由一组信源符号集和一组条件概率确定： 并满足 则称此信源为m阶马尔科夫