通信的数学理论-香农-中文版 1
,“信息传输”, 贝尔系统科技刊物,1928 年 7 月,第 535 页。
一个十进制数大约 比特。书桌上的一个阿拉伯数字计数器有十个稳定的位置并且
因此拥有存储十进制数字的能力。有时在综合和区分的解析工作中底数 很有用处。以此
为底的信息结果将被叫做自然对数。将底数由 a 改为 b 仅仅需要乘以 。
对于通信系统我们想要用一个系统的示意图图 1 阐明。它包括五个重要的部分:
1.一个制造信息或排序信息的信息源将被传达到终端。信息可能有各种不同类型 :(a)电传
打字系统的电报中的字母序列;(b)无线电话中的一个单一时间函数 f(t);(c)一个时间函数和
其它应用在黑白电视机中的变量—在这里信息可能被当做一个二个空间坐标和时间的函数
f(x,y,t);在点(x,y)的光强度,在光的金属板上获得的时间 t;(d)二或更多的时间函数,分别
为 f(t)、g(t),h(t)—这是“三维”声音传播的情形,或者若系统有意维修个别多元通道;(e)一
些变量的一些函数—在彩色电视机中有三个函数 f(x,y,t),g(x,y,t),h(x,y,t),定义在一个三
维空间的闭联集中—我们也可能想像这三个函数作为一个定义在区域矢量场的向量分量—
同样地,个别黑白电视机消息来源是许多三个变量的函数;(f)不同的混合物也会发生,例
如在电视机中有联合的音频信道。
2.用一些方法操作信息以产生在信道上传输的合适信号的传达者。在电话制造中这种操作
包括的仅仅是替换躁声压力为电流。在电信技术中我们有产生一系列点、莫尔斯电码、空
间等相关信息信道的编码、译码的操作。在一个多元的 PCM 系统不同的语音函数必须被
取样压缩, 量子化和编码,而且最后完全交叉存取地构造信号。声音传播机系统、电视和频
率调制器是其他的联合体操作应用于信息以获取信号的例子。
3.信道只是用来从传达者到接收者传送信号的媒介。它可能是一双电线、一个同桥电缆、
一条无线电电波,一个光束,等等。
4.接收者通常完成由传达者做的反运算,重建来自信号的信息。
5.目的地是信息对其有意的人(或者事物)。我们希望考虑特定的一般问题用于信息系统。
这首先需要描述不同数学实体的相关原理,将他们的物理副本合理的理想化。我们大致把
通信系统分为三大类:离散的,连续的和混和的。离散系统对于我们就意味着信息和信号
是一系列的离散符号。一个典型的情形是在电信技术中消息是一系列的字母和信号点、莫
尔斯电码及空间。连续型的系统就是一个信息和信号都被看作是连续函数的系统,例如无
线电通信或电视机。混合系统中既有离散的又有连续的变量,例如 PCM 语言传输。我们
首先考虑离散的情形。这种情形不仅应用于通信理论,而且应用于计算机理论,电话局和
其他领域的设计。另外离散的情形构成在下半页要处理的连续和混合情形的基础。
第一部分:离散的无噪声系统
1.离散的无噪声信道
电传打字机和电信技术是离散信道上信息传输的两个简单例子。一般来讲,一个离散
信道就意味着一个系统怎么从可以从一个点传到另一个点被传输的有限集合元素符号
选择次序。每一个符号 被假定有确定的连续时间 秒(对于不同的 没必要相
同,例如电信技术中的点和莫尔斯电码)。这不需要有可能传输到系统的 的所有可能排
序,确定次序仅仅是可能被允许。这将在信道产生可能的信号。这样在电信技术中可以推
想符号有:(1)一个点,包括一个单位时间的关闭和一个单位时间的线性开启;(2)一
个莫尔斯电码,包括三个单位时间的关闭和一个单位时间的开启;(3)一个包括三个单
2
评论0
最新资源