有一信源輸出X∈{0,1,2},其概率為p0=1/4,p1=1/4,p2=1/2。設(shè)計兩個獨立實驗去觀察它,其結(jié)果為Y1∈{0,1}和Y2∈{0,1}。已知條件概率為 求: 1) I(X;Y1)和I(X;Y2),并判斷哪一個實驗好些。 2) I(X;Y1,Y2),并計算做Y1和Y2兩個實驗比做Y1或Y2中的一個實驗各可多得多少關(guān)于X的信息。 3) I(X;Y1/Y2)和I(X;Y2/Y1),并解釋它們的含義。
設(shè)離散無記憶信源,其發(fā)出的消息為(202120130213001203210110321010021032011223210),求 (1)求每個符號的自信息量; (2)若信源發(fā)出一消息符號序列為(202 120 130 213 001 203 210 110 321 010 021 032 011 223 210),求該消息序列的自信息量及平均每個符號攜帶的信息量。