信息论和编码要求.pptVIP

关于两个事件互相提供信息量的大小？ （1）直观看，两个事件在什么样的情况下给对方提供的信息量最大。 （2）我们已经事先知道D国和美国经常唱反调，C国对美国态度保持中立，英国和美国关系很好，那么美国和某国E发生战争：I、对于英国在是否向某国E宣战，是否提供信息量？ II、对于C国是否向某国E宣战，是否提供信息量？III、对于D国是否向某国E宣战，是否提供信息量？哪个提供的信息量大？提供的信息量是否有正负之分？ （3）经常骗人的骗子是否给你提供有效的信息？ （4）已知发送信号错误率太高，比如二进制每bit的错误率超过了百分之五十，能否提供有效的信息？ （5）以下几类人说 “狼来了”给我们提供的信息量？我们已经事先知道他是：A）诚实的人。B）经常故意骗人，说反话的人。C）故意吓唬人，闭着眼睛随便乱说话的人，不管狼来不来都乱说。 学习得来终觉浅，绝知此事要自悟 信息压缩的极限（与信息度量） （1）假如对n个事件可以进行任意长度的编码，则编码的影响因素有哪些？当希望编码长度尽量短的时候应该怎么办。 （2）假如要告知对方某种情况，而告知的情况只是n中情况之一，是否可以采用约定的编号、暗号等进行通信，这个编号最小的取值范围是多少？ （3）我们希望对消息进行编码，以求编码的平均长度最短，假如n种情况中，某一情况发生的可能性极大，概率达到99.9999999%，对于各种情况都采用相同长度的编码表