熵H(X,Y)称为联合熵,共熵,它表示通信完成之后，观察者对通信系统仍然存在的平均不确定度。

[单选题]信息熵是事件不确定性的度量，信息熵越小，说明不确定性（）。A . 越小B . 不变C . 越大D . 不能确定

[填空题] 平均互信息量I（X；Y）与信源熵和条件熵之间的关系是（）。

[判断题] 当随即变量X和Y相互独立时，条件熵等于信源熵。A . 正确B . 错误

熵是系统混乱度大小的度量。系统的混乱度越大,则其熵值越大。()A. 对B. 错

[填空题] 设信道输入端的熵为H（X），输出端的熵为H（Y），该信道为无噪有损信道，则该信道的容量为（）

[单选题]把申农度量信息不确定性的熵和力学中的熵直接联系起来的是（）A . 施拉姆B . 维纳C . 拉扎斯菲尔德D . 布里渊

多符号离散平稳无记忆信源XN的熵H（XN）与单符号离散信源X的熵H（X）的关系是（）A. H（XN）=H（X）B. H（XN）=NH（X）C. H（XN）=H（

[填空题] 互信息I（X；Y）与信息熵H（Y）的关系为：I（X；Y）（）（大于、小于或者等于）H（Y）。

[单选题]当系统接受热量时系统的熵（）；当系统放出热量时系统的熵（）。A . 增加；减少B . 减少；增加C . 增加；增加D . 减少；减少

[名词解释] 熵。