精品文档
收到一个符号时获得的平均信息量
H (x)
P(x
i
)log
2
P(x
i
)
i1
n
例，一离散信源由 0，1，2，3，四个符号组成，它们出现的概
率分别 3/8,1/4,1/4,1/8,且每个符号的出现相互独立，则试求
信息 2010230213 的平均信息量是多少？
3 3 1 1 1 1 1 1
H log
2
log
2
log
2
log
2
8 8 4 4 4 4 8 8
1.906(bit / 符号)
8. 数据通信系统中的主要性能指标
比特(bit): 是“信息量”的计量单位，1 位二进制数所携带的
信息量即为 1bit(比特)，例如，10010110 是 8 位二进制数字，所携
带的信息量为 8bit。
码元： (code cell)是携带信息的数字单位，是指在数字信道
中传送数字信号的一个波形符号，也即“时间轴上的一个信号编码
单元”。在数字通信中常常用时间间隔相同的符号来表示一个二进
制数字，这样的时间间隔内的信号称为(二进制）码元。
码元和比特的关系:一个以 m 波特传送信号的线路，其传送二
进制数据的速率不一定是 m 比特/秒，因为每个信号可以运载几个比
特，例如，若使用 0、1、2、3、4、5、6、7 共 8 个电平级，则需要
2^3，即 3 个比特来表示一个信号值，可以理解为一个码元为三个比
特。
收集于网络，如有侵权请联系管理员删除
