1桂林工学院2009-2010学年第二学期课程名称:《信息论与编码》一、填空(每题2分,共20分)1、信息是对事物状态(或它的存在方式)的不确定性的一种描述,其中自信息I(x)=;事件发生前,它表示,事件发生后,它表示
2、已知一个单符号离散无记忆信源,4/14/12/1)(321xxxXPX,则其四次扩展信源的序列熵的大小为______
3、对于单符号离散无记忆信源X,若输出符号取值于集合876,5,4321,,,,,xxxxxxxx,则其最大信源熵为______,且达到此最大熵时各符号的概率分布为__________________
4、信源编码的目的是为了提高通信系统的____________________,而信道编码的最终目的是为了______________________________
5、一离散信道的信道矩阵如下所示,则其信道容量为______比特/信道符号
000000000005
00000003
0P6、有一个信源,它产生0,1序列的信息,它在任意时间而且无论以前发生什么符号,均按P(0)=0
3,P(1)=0
7的概率发出符号,则H(X2)=,X2信源中可能有的符号H(X3/X1X2)=
7、在对单符号离散信源进行费诺编码时,其中一个步骤是按编码进制数将概率分组,分组的原则是使每组概率之和______________________
8、设某二元码为C={11100,01001,10010,00111}若码字等概率分布,则此码的码率为,若采用最小距离译码准则,则接收序列10011,01100,应译成的码字分别为、9、(7,4)汉明码的许用码组有__个;若一码组为0100111,则其码重为___
210、某(7,4)循环码,生成多项式为g(x)=x3+x+1(对应码字为0001011),则码字10