第2章 信源与信息熵

2.3 测试

1、单选题:
‌ 离散有记忆平稳信源的极限熵存在,而且它的值为(    )。‌
选项:
A: 处于0和H1(X)的某一有限值。
B: 处于负无穷和0之间的某一有限值。
C: 处于0和正无穷之间的某一有限值。
D: 无穷大。
答案: 【 处于0和正无穷之间的某一有限值。

2、单选题:
‎当平稳有记忆序列的记忆长度有限时,设记忆长度为m,则离散无记忆信源的极限熵为(     )。‌
选项:
A: 有限记忆长度为m的联合熵。
B: 有限记忆长度为m的条件熵。
C: 负无穷。
D: 正无穷。
答案: 【 有限记忆长度为m的条件熵。

3、判断题:
‏平均符号熵不小于条件熵。‌
选项:
A: 正确
B: 错误
答案: 【 正确

4、判断题:
‌平均序列熵(长度为L)随着L的增加而递增。‎
选项:
A: 正确
B: 错误
答案: 【 错误

周一晚上许方敏老师班级

1、单选题:
彩色电视显像管的屏幕上有 500000 个像元,设每个像元有16种彩色度,每种彩度又有 64 种不同的亮度层次,如果所有的彩色品种和亮度层次的组合均以等概率出现,并且各个组合之间互独立。则每秒传送 25 帧图像需要的信道容量为多少?
选项:
A: 64*10^6
B: 50*10^6
C: 125*10^6
D: 250*10^6
答案: 【 125*10^6

2、单选题:
当离散信源输出服从( ) 分布时,其熵为最大
选项:
A: 等概率分布
B: 均匀分布
C: 正态分布
D: 指数分布
答案: 【 等概率分布

3、单选题:
当信道传递概率固定时,信道输入与输出间的平均互信息是输入分布的    函数
选项:
A: 上凸
B: 下凸
C: 奇
D: 偶
答案: 【 上凸

4、单选题:
当输入分布固定时,信道输入与输出间的平均互信息是信道传递概率的      函数
选项:
A: 上凸
B: 下凸
C: 奇
D: 偶
答案: 【 下凸

5、单选题:
关于互信息的取值,正确的应该是
选项:
A: 大于等于0
B: 小于等于0
C: 可正可负
D: 大于0
答案: 【 可正可负

6、单选题:
关于平均互信息的取值,正确的应该是
选项:
A: 小于等于0
B: 大于等于0
C: 不确定的
D: 大于0
答案: 【 大于等于0

7、单选题:
给定xi条件下,随机事件yj所包含的不确定度和条件自信息量的说法,正确的是
选项:
A: 单位不同
B: 数量不同
C: 数量相等,单位不同
D: 数量相等,物理含义不同
答案: 【 数量相等,物理含义不同

8、单选题:
在下面空格中选择填入的数学符号“=,≥,≤,>”或“<”, H(XY) H(Y)+H(X∣Y)
选项:
A: 等于
B: 小于
C: 大于
D: 大于等于
答案: 【 等于

9、单选题:
‍一般情况下,H(X |Y)  (    )H(X)。‌‍‌
选项:
A: 小于
B: 等于
C: 大于
D: 不小于
答案: 【 小于

10、单选题:
下列描述中,错误的是( )。
选项:
A: I(X;Y)=H(X)-H(X|Y)
B: I(X;Y)=H(X)+H(Y)-H(XY)
C: H(X)>=H(X|Y)
D: H(XY)>=H(X)+H(Y)
答案: 【 H(XY)>=H(X)+H(Y)

11、单选题:
‌两个独立事件的联合信息量等于它们分别的信息量之(    )。​
选项:
A: 积
B: 和
C: 差
D: 商
答案: 【 和

12、单选题:
‍如果不知道今天是星期几,问同学”明天是星期几?”的答案,包含多少信息量?​
选项:
A: 2.50bit
B: 0bit
C: 2.81bit
D: 1.59bit
答案: 【 2.81bit

13、判断题:
‌连续熵一般指相对熵,是绝对熵减去一个无穷大项得到的。‍
选项:
A: 正确
B: 错误
答案: 【 正确

14、判断题:
‍连续熵有可能是正的,有可能是负的。​
选项:
A: 正确
B: 错误
答案: 【 错误

15、判断题:
​连续熵有可能是正的,有可能是负的。‍
选项:
A: 正确
B: 错误
答案: 【 错误

16、判断题:
如果是一一对应信道,接收到Y后,对X的不确定性将完全消除,即H(X|Y) = 0。
选项:
A: 正确
B: 错误
答案: 【 正确

17、判断题:
‌离散信源的随机性越大,熵越小。‏
选项:
A: 正确
B: 错误
答案: 【 错误

18、判断题:
根据信息不增性原理,信息传输系统中接收端获得的信息量小于发送端发出的信息量。‏‍‏
选项:
A: 正确
B: 错误
答案: 【 正确

19、判断题:
‌必然事件和不可能事件的自信息量都是0 。​
选项:
A: 正确
B: 错误
答案: 【 错误

20、判断题:
‍自信息量是非负的单调递减函数。‌
选项:
A: 正确
B: 错误
答案: 【 正确

21、判断题:
‎信息是不可以度量的,是一个主观的认识。‍
选项:
A: 正确
B: 错误
答案: 【 错误

22、判断题:
‍任何已经确定的事物都不含有信息。‌
选项:
A: 正确
B: 错误
答案: 【 正确

周五应娜老师班级

1、单选题:
‍ 一般情况下,H(X |Y)  (    )H(X)。​
选项:
A: 大于
B: 等于
C: 大于等于
D: 小于等于
答案: 【 小于等于

2、单选题:
当离散信源输出服从( ) 分布时,其熵为最大
选项:
A: 等概率分布
B: 均匀分布
C: 正态分布
D: 指数分布
答案: 【 等概率分布

3、单选题:
‍当输入分布固定时,信道输入与输出间的平均互信息是信道传递概率的(   )函数。‏
选项:
A: 上凸
B: 下凸
C: 奇
D: 偶
答案: 【 下凸

4、单选题:
下列描述中,错误的是( )。
选项:
A: I(X;Y)=H(X)-H(X|Y)
B: I(X;Y)=H(X)+H(Y)-H(XY)
C: H(X)>=H(X|Y)
D: H(XY)>=H(X)+H(Y)
答案: 【 H(XY)>=H(X)+H(Y)

5、单选题:
离散平稳序列X,则符号H0(X), H1(X), H10(X), H∞(X)所代表的信息熵,数值最小的是(   )。‌
选项:
A: H0(X)
B:  H1(X)
C:  H10(X)
D: H∞(X)
答案: 【 H∞(X)

6、单选题:
离散序列X=[X1,X2,…,XL],若存在其概率P(Xs1,Xs2,…,Xsk)=P(Xs1+m,Xs2+m,…,Xsk+m),即下标时间具有平移不变性。则称该离散序列为 (        )。‏
选项:
A:  严平稳序列
B:  宽平稳序列
C: 非平稳序列
D: 非时变序列
答案: 【  严平稳序列

7、单选题:
离散平稳无记忆序列X=[X1,X2,…,XL],则符号HL(X)的含义为 (    )。‎‎
选项:
A:  HL(X)=H(X1,X2,…,XL)/L
B:  HL(X)=H(XL| X1,X2,…, XL-1)
C: HL(X)=H(X1,X2,…, XL-1| XL)
D:  HL(X)= limL->∞H(X1,X2,…, XL-1| XL)
答案: 【  HL(X)=H(X1,X2,…,XL)/L

8、单选题:
‏有一信源呈均匀分布,其概率空间为[1,3],则其相对熵为(     )bit。‎
选项:
A: 0
B: 1
C: 2
D: 1/2
答案: 【 1

9、判断题:
‌任何已经确定的事物都不含有信息。​
选项:
A: 正确
B: 错误
答案: 【 正确

10、判断题:
‌离散信源的随机性越大,熵越小。​
选项:
A: 正确
B: 错误
答案: 【 错误

11、判断题:
‎必然事件和不可能事件的自信息量都是0 。‌
选项:
A: 正确
B: 错误
答案: 【 错误

12、判断题:

对于离散无记忆信道和信源的N次扩展,其信道容量

​选项:
A: 正确
B: 错误
答案: 【 正确

13、判断题:
‎在X-Y-Z的信息传递中,信息不增性原理表示为I(X;Z)>=I(Y;Z)。‏
选项:
A: 正确
B: 错误
答案: 【 错误

14、判断题:
‎如果H(X|YZ)=0,则要么H(X|Y)=0 , 要么H(X|Z)=0 。‌
选项:
A: 正确
B: 错误
答案: 【 错误

15、判断题:
‍H(X|X)=0 。‌
选项:
A: 正确
B: 错误
答案: 【 错误

16、判断题:
​若X与Y独立,则H(X|Y)= H(Y|X) 。‎
选项:
A: 正确
B: 错误
答案: 【 错误

17、判断题:
‎离散平稳有记忆信源符号序列的平均符号熵随着序列长度L的增大而增大。‌
选项:
A: 正确
B: 错误
答案: 【 错误

18、判断题:
‍离散信源的序列熵等于各个符号的熵之和。‌
选项:
A: 正确
B: 错误
答案: 【 错误

19、判断题:
连续熵一般指相对熵,是绝对熵减去一个无穷大项得到的。‏
选项:
A: 正确
B: 错误
答案: 【 正确

20、判断题:
​连续熵有可能是正的,有可能是负的。‌
选项:
A: 正确
B: 错误
答案: 【 错误

21、判断题:
‍连续熵的最大熵定理指每个出现的事件等概率出现。&

剩余75%内容付费后可查看

发表评论

电子邮件地址不会被公开。 必填项已用*标注