算法合集之《信息论在信息学比赛中的简单应用》.pptxVIP

在信息学竞赛中的简单应用 侯启 明 畦唾页隐剔若翅劈钡遍伯驼胳援雍扇隧蕾煤郎炒乓投食眺狙匠踩氨困讳此算法合集之《信息论在信息学竞赛中的简单应用》算法合集之《信息论在信息学竞赛中的简单应用》 信息论简介 信息论是关于信息的本质及传输规律的科学的理论。 通过它可以很方便地得到某些交互式问题的一个较好的步数下界(“信息论下界”) 让我们先来看一些信息论的基本理论 安富圾瞄匈蜀谴悬点傈袁澄威墙依的唱脑迸噪临嚏诺许旧肇籍捧翠呕静油算法合集之《信息论在信息学竞赛中的简单应用》算法合集之《信息论在信息学竞赛中的简单应用》 理论基础 定义：如果一个随机变量x共有n种取值，概率分别为p0,p2,......,pn，则其熵为H(x)=f(p0,p2,......,pn)=-∑Cpilogpi 定理1：在得到关于随机变量x的一个熵为h的信息后，x的熵将会减少h。 定理2：当一个随机变量的各种取值概率相等时，它的熵最大。 录蜗嘶甄宪啪揽忠堕稚涝阐欺两衍练硕欢吕揣貌相嵌藐微簇固出鸽炸演园算法合集之《信息论在信息学竞赛中的简单应用》算法合集之《信息论在信息学竞赛中的简单应用》 这些理论看上去及某些题目关系密切，不是吗？ 那么，具体应该如何运用呢？让我们来看一些例子： 方炔变拆审沾纹究缔棚酿岸睹斑郡桂卉录燃庭蘸樟尿额临粘揣陕慌编糖邻算法合集之《信息论在信息学竞赛中的简单应用》算法合集之《信息论在信息学竞赛中的简单应用》 我们宿舍二楼到三楼之间楼梯的窗户外面是相邻的一个平房的房顶。在那一带栖息着三只浑身雪白，有着一只蓝眼睛及一只绿眼睛的—— 例1：验证一下定理1 猫！ 湿宅炸甜韵庸赃碳覆闺搐痛撰岸骇接欣糖栅勇萤悔纺萝舒乱忿内句淀诚起算法合集之《信息论在信息学竞赛中的简单应用》算法合集之《信息论在信息学竞赛中的简单应用》 例1：验证一下定理1 在天冷的时候，它们喜欢趴在楼内的暖气上。于是，每只猫就有了两种状态：在屋内及在屋外。因此，三只猫的状态共有8种可能情况，假设它们是等概率的。 现在，我在一楼的小卖部。由于种种原因，我希望知道猫当时的状况，因此，我往上看了一眼，结果发现在这个位置只能知道屋内猫的只数…… 读林纸颈惑寓铜摆拭埔褥景雪驳鸳黄氖嘛阵事考菇蜗叶诵躲榨沽坠腕涵旱算法合集之《信息论在信息学竞赛中的简单应用》算法合集之《信息论在信息学竞赛中的简单应用》 例1：验证一下定理1 问题1：把所有猫的情况作为一个随机变量x，则当我在小卖部的时候，x的熵是多少？ 解答1：由于8种情况的概率相等，所以： H(x)=f(1/8,1/8,1/8,1/8,1/8,1/8,1/8,1/8)=log8 问题2：我看一眼所得到的信息y的熵是多少？ 解答2：由于猫的只数共有0,1,2,3四种情况，概率分别为(1/8,3/8,3/8,1/8)，所以： H(y)=f(1/8,3/8,3/8,1/8)=log8-6log3/8 切媒瞬岁顺毒铅览割牌灾峦斧堰惦捶啊烁滓判涯板峪硒移噬闰迹雹粗舰甚算法合集之《信息论在信息学竞赛中的简单应用》算法合集之《信息论在信息学竞赛中的简单应用》 例1：验证一下定理1 问题3：我看完之后，x的熵H(x)是多少？ 解答3：此时猫的只数为0,1,2,3的四种情况的概率依次是(1/8,3/8,3/8,1/8)，而每种情况的熵分别为(0,log3,log3,0)，所以此时H(x)的数学期望为： H(x)=1/8*0+3/8*log3+3/8*log3+1/8*0=6log3/8 可以发现H(x)=H(y)+H(x)。 定理1得到了验证。 出恢警竭唬朴奇呛谨湘滇莎锑更慢额瞳升纱其昌地婚陆溜骨滚吻画裔彰讣算法合集之《信息论在信息学竞赛中的简单应用》算法合集之《信息论在信息学竞赛中的简单应用》 例2：Rods(IOI2002) 一个Rod是一个由至少2个单位正方形连成的水平或竖直的长条。在一个N*N的方阵中，放了水平及竖直两个Rod。如图1，其中Rod用X表示。 溢兴促森晶睡扭银铬袍顽秋径诵襟吴像驮帧割藩帛官臃葫氓胸篇饵大原衔算法合集之《信息论在信息学竞赛中的简单应用》算法合集之《信息论在信息学竞赛中的简单应用》 例2：Rods(IOI2002) 两个Rod可能有公共方格，比如在图1中，方格（4，4）无法确定是仅属于1个Rod还是同时属于两个Rod。因此，在这种情况下我们假定它同时属于两个Rod。这样，图中竖直Rod的上端点是（4，4）而不是（5，4）。 箭酷季殖啼凛耸如教蛊垮也卉俊钥豫贾曳赋整缀姜饿夸玖攀云匙闯窟喳荒算法合集之《信息论在信息学竞赛中的简单应用》算法合集之《信息论在信息学竞赛中的简单应用》 最初我们并不知道两个Rod的位置，你的任务是编程序