通信原理1-讲述.ppt

通信原理 第一章 概论 1.1 通信的发展 古代通信的起源 两类通信方式 近代通信的发展 1.2 消息、信息和信号 消息：语音、文字、图形、图像… 信息：消息的有效内容 不同消息可有相同内容 信号：传输消息的手段（媒介） 通信系统中传输的是信号 信息的度量： *制定度量方法考虑的原则 货 物 消 息 货运量 信息量 有多种 有多种 和种类无关 和类型无关 和贵重程度 和重要程度 无关 无关 总量是单件 总量是单件独立 货运量之和 消息的信息量之和 *制定度量信息的方法 # 消息“量” ? 信息量 # 例：“明天降雨量将有一毫米” -- 信息量小 “明天降雨量将达到一米” -- 信息量大 “明日太阳将从东方升起” -- 信息量零 # 信息量 I = I [ P(x) ]，P(x) -- 发生概率 # 定义：I = loga [1/P(x)] = -logaP(x) # 通常取 a = 2, 此时单位为“比特”。 # 对于一个等概率、二进制码元： I = log2 [1/P(x)] = log2 [1/(1/2)] = 1 比特 # 对于一个等概率、M进