某二进制离散信源，1、0发生的概率分别为l／4和3／4，该信源的平均信息量为___________。

13．有一离散无记忆信源，其输出为X∈{0，1，2}，相应的概率为P(0)=1/4，P(1)=1/4，P(2)=1/2，设计两个独立试验去观察它，其结果分别为Y₁∈{0，1)，Y₂∈{0，1}，已知条件概率如表1所示。

19．设某离散平稳信源X，概率空间为

并设信源发出的符号只与前一个相邻符号有关，其联合概率为p(a_ia_j)如下表所示。

求信源的信息熵、条件熵与联合熵，并比较信息熵与条件熵的大小。

19．设某离散平稳信源X，概率空间为

并设信源发出的符号只与前一个相邻符号有关，其联合概率为p(a_ia_j)如下表所示。

求信源的信息熵、条件熵与联合熵，并比较信息熵与条件熵的大小。

求下列计算值： (1)已知二元离散信源具有0、l两个符号，若出现0的概率为1／3，求出现1的自信息量： (2)若某离散信源由0、l、2、3四种符号组成，出现概率为：

求该信源的熵； (3)已知电话信道的带宽是3400Hz，若要求传输6800bps的数据，请计算要求信道的最小信噪比是多少分贝。假设信道中的噪声是加性高斯噪声。

某离散无记忆信源S的符号集A={a₁，a₂，a₃，a₄，a₅，a₆，a₇，a₈}，各符号的概率分别为：0.1，0.2，0.2，0.3，0.05，0.05，0.05，0.05；

设S为一离散无记忆信源，其符号集合为{0，1}，概率分布为p(0)=0.995，p(1)=0.005。令信源符号序列的长度为n=100，假定对所有只包含3个以下符号“1”的序列编制长度为k的非奇异二进制码。求：

一个离散无记忆信源的字符集为{-5，-3，-1，0，1，2，3)，相应的概率为{0．08、0．2、0．15、0．03、0．12、0．02、0.4}。 (1)设计信源熵H(x)。 (2)设计该信源的哈夫曼(Huffman)编码。