![](https://static.youtibao.com/asksite/comm/h5/images/m_q_title.png)
[主观题]
19.设某离散平稳信源X,概率空间为 并设信源发出的符号只与前一个相邻符号有关,其联合概率为p(aiaj)如下
19.设某离散平稳信源X,概率空间为
并设信源发出的符号只与前一个相邻符号有关,其联合概率为p(aiaj)如下表所示。
联合概率p(aiaj) | ||||
p(aiaj) | ai | |||
0 | 1 | 2 | ||
aj | 0 | 1/4 | 1/18 | 0 |
1 | 1/18 | 1/3 | 1/18 | |
2 | 0 | 1/18 | 7/36 |
求信源的信息熵、条件熵与联合熵,并比较信息熵与条件熵的大小。
查看答案
![](https://static.youtibao.com/asksite/comm/h5/images/solist_ts.png)
19.设某离散平稳信源X,概率空间为
并设信源发出的符号只与前一个相邻符号有关,其联合概率为p(aiaj)如下表所示。
联合概率p(aiaj) | ||||
p(aiaj) | ai | |||
0 | 1 | 2 | ||
aj | 0 | 1/4 | 1/18 | 0 |
1 | 1/18 | 1/3 | 1/18 | |
2 | 0 | 1/18 | 7/36 |
求信源的信息熵、条件熵与联合熵,并比较信息熵与条件熵的大小。
设S为一离散无记忆信源,其符号集合为{0,1},概率分布为p(0)=0.995,p(1)=0.005。令信源符号序列的长度为n=100,假定对所有只包含3个以下符号“1”的序列编制长度为k的非奇异二进制码。求:
设一离散无记忆信源的输出由四种不同的符号组成,它们出现的概率分别为1/2、1/4、1/8、1/8。
(1)此信源平均每个符号包含的信息熵多大?
(2)若信源每隔10毫秒发出一个符号,那么此信源平均每秒输出的信息量为多少?
证明离散平稳信源有H(X1X2…XN)≤H(X1)+H(X2)+…+H(XN),并说明等式成立的条件。
A.概率空间的变化,不一定导致熵的变化
B.熵函数的递推性指出,细节越丰富,信息量越大
C.熵函数的递推性指出,细节越丰富,信息量越小
D.上面选项都不对
设X是一个离散型随机变量,则( )可作为X的概率分布.
A.p,p2(P为任意实数) B.0.1,0.2,0.3,0.4
一个四元信源X,各符号的概率分别为p/2,(1- p)/2,(1-p)/2,p/2.失真矩阵为:
其中,p<1/2.求信源的R(D)函数,并画出曲线。
设离散型随机变量X的概率分布列表如表5-6:
表5-6 | |||
X | -1 | 2 | 3 |
P | c | 2c | 4c |
试求: