信息论惟一可译码判别方法.pptVIP

信息论惟一可译码判别方法 第1页，共10页，编辑于2022年，星期五 3. 唯一可译码与非唯一可译码 定义5.3 任意有限长的码元序列，如果只能唯一地分割成一个个码字，便称为唯一可译码。 唯一可译码的物理含义是指不仅要求不同的码字表示不同的信源符号，而且还要求对由信源符号构成的符号序列进行编码时，在接收端仍能正确译码而不发生混淆。唯一可译码首先是非奇异码，且任意有限长的码字序列不会雷同。 4. 即时码与非即时码 定义5.4 无需考虑后续的码符号就可以从码符号序列中译出码字，这样的唯一可译码称为即时码。 第2页，共10页，编辑于2022年，星期五 下面讨论唯一可译码成为即时码的条件。 定义5.5 设 为一码字，对于任意的 ，称码符号序列的前j个元素 为码字的前缀。 按照上述的前缀的定义，有下述结论： 定理5.1 一个唯一可译码成为即时码 的充要条件是其中任何一个码字都不是 其他码字的前缀。 即时码可以用树图来构造．图5.2是一个 二元即时码的树图． 图5.2 二元即时码的树图 第3页，共10页，编辑于2022年，星期五 树是没有回路的图，所以它也是由节点和弧构成的．树中最顶部的节点称为根节点，没有子节点的节点称为叶子节点。 所有根节点的子节点称为一阶节点，所有一阶节点的子节点称为二阶节点，依此类推。 阶节点最多有 个。节点的阶次又称为节点的深度。 综上所述，可将信源编码作如下分类： 码 非分组码（树码） 分组码（块码） 奇异码 非奇异码 非唯一可译码 唯一可译码 即时码 非即时码 第4页，共10页，编辑于2022年，星期五 唯一可译码的判别准则 A.A.Sardinas和G.W.Patterson于1957年提出下述算法用于判断码C的唯 一可译性．此算法的原理如下所示： 其中 都是码字。可知，当且仅当某个有限长的码符号序列能译成 两种不同的码字序列时，此码不是唯一可译码，此时 一定是 的前 缀，而 的尾随后缀一定是另一码字 的前缀；而 的尾随后缀又是 其他码字的前缀．最后，码符号序列的尾部一定是一个码字。 第5页，共10页，编辑于2022年，星期五 设C为码字集合，按以下步骤构造此码的尾随后缀集合F： (1) 考查C中所有的码字，若 是 的前缀，则将相应的后缀作为一个 尾随后缀码放入集合 中； (2) 考查C和 两个集合，若 是 的前缀或 是 的 前缀，则将相应的后缀作为尾随后缀码放入集合 中； (3) 即为码C的尾随后缀集合； (4) 若F中出现了C中的元素，则算法终止，返回假(C不是唯一可译码) 否则若F中没有出现新的元素，则返回真。 定理5.5 一个码是唯一可译码的充要条件是的 并集中没有C 中的码字。 第6页，共10页，编辑于2022年，星期五 * * 惟一可译码判别准则——例题 命题5.4.1 一种码是唯一可译码的充要条件是S1, S2,…中没有一个含有S0中的码字。 S0 S1 S2 S3 S4 S5 0 00 0 0 10 11 10 11 100 0 1100 01 1 110 1 1110 011 11 1011 101 1 1101 第7页，共10页，编辑于2022年，星期五