信息论与编码理论1.docxVIP

2011-2012信息论与编码理论1 B卷答案 单项选择题(每题 3分，总计15分) C H(X |Y) H (Y C H(X |Y) H (Y | X) D I (X;Y) H (X;Y) 下列( 下列(D )陈述是正确的。 A Shannon编码是最优码 C Huffman编码可以不需要知道信源的分布 下列数组中( A )不满足二个字母上的 B LZ编码是异字头码 D 典型序列的数目不一定比非典型的多 Kraft不等式。 1.当底为e时， 熵的单位为(C )。 A奈特 B 哈特 C奈特/符 号 D哈特/符号 2.下列关系式中 (B )正确。 A I (X;Y) I(X) B H(X,Y) I(X;Y) A (1 , 1, 1) B (2,2,2,2) C (3,3,3) D (4, 4, 4) 下列( D )是只对输出对称的。 1 2 1 1 1 0.2 0.4 0.4 3 3 a 3 6 2 B 0.4 0.2 0.4 C 2 1 0.2 D 0.2 0.4 1 1 1 3 3 0.4 0.4 0.2 2 6 3 0.4 0.4 0.2 1 2 3 3 二、填空题(每空 2分，总计20分) 1.若二元离散无记忆中 p(0) 0.25 , p(1) 0.75，则当给出100比特的信源序列，其中 有5个 有5个1,则其自信息为200 5log23比特, 整个序列的熵为100(2