第一章 信息论的基本概念--鉴别信息【含答案】 应用信息论基础

(1)单选题

常用Venn图说明信息论里各基本量之间的关系。设有离散随机变量X和Y,若在下图中左侧绿色圆表示H(X),右侧蓝色圆表示H(Y)。则这两个圆相交所分成的三个互不重合的部分,即图中所示的区域Ⅰ、Ⅱ、Ⅲ分别代表的信息度量为

A  H(X | Y), H(X, Y), H(Y | X)

B  H(Y | X), H(X, Y), H(X | Y)

C  H(X | Y), I(X; Y), H(Y | X)

D  H(Y | X), I(X; Y), H(X | Y)

(2)多选题

关于上图所示的区域Ⅱ所代表信息度量的取值的说法,正确的有

A  可以取正值

B  可以为零

C  可以取负值

D  可以等于H(X)

(3)单选题

设p,q,r均为离散概率分布,则下列关于鉴别信息的关系中一定成立的是

A  非负性 D(p || q) >= 0

B  对称性 D(p || q) = D(q || p)

C  三角不等式 D(p || r) <= D(p || q) + D(q || r)

获取标准答案请阅读全文

未经允许不得转载!第一章 信息论的基本概念--鉴别信息【含答案】 应用信息论基础