《信息论与编码》基本概念复习参考_2005.pptVIP

第2次课（2005年3月6日） 提问几个问题（上次课的回顾）： 1.Shannon信息论研究的核心问题？其出发点？重点研究内容？? 2.事件的自信息量和该事件的不确定度之间的区别？ 3.请用语言叙述信息熵的定义。 4.用互信息量的概念说明什么情况下有信息的流通、什么情况下没有信息的流通。 第3次课（2005年3月13日） 1.?请给出平均互信息量、疑义度、散布度的定义及含义。 ? 2.? 请说说时间熵的定义、量纲。 3.? 请举例说明信源冗余度的定义。 4.?请谈谈信源符号序列分组定理要解决的问题，用语言描述该定理。 5.?给出根据信源符号序列分组定理而进行的分组中典型符号序列的个数并说明其含义。 第4次课（上次课的回顾） 2005年3月20日 1. 请给出信源编码器的主要任务以及对信源编码的基本要求。 2. 请给出信道容量和信源编码器的编码效率的定义。 3. 请给出最佳编码通常遵循的两个原则。 4. 请描述二进制编码和无记忆信源条件下香农第一定理。 5. 请描述霍夫曼编码的方法及其特点。 6. 请描述Lempel-Ziv编码的基本思路及方法。 第5次课（上次课的回顾） 2005年3月27日 1. 简述一种汉字文本消息的编码方法 2. 简述信源译码的错误扩展现象 3. 简述常用的信道分类 4. 简述信道矩阵的含义及作用