信息論與編碼章節(jié)練習(xí)(2020.05.18)

填空題
根據(jù)碼字所含的碼元的個(gè)數(shù)，編碼可分為（）編碼和（）編碼。
答案：定長;變長
問答題
黑白氣象傳真圖的消息只有黑色和白色兩種，求：（1）黑色出現(xiàn)的概率為0.3，白色出現(xiàn)的概率為0.7.給出這個(gè)只有兩個(gè)符號(hào)的信源X的數(shù)學(xué)模型，假設(shè)圖上黑白消息出現(xiàn)前后沒有關(guān)聯(lián)，求熵X（H）；（2）假設(shè)黑白消息出現(xiàn)前后有關(guān)聯(lián)，其依賴關(guān)系為：P（白/白）=0.9，P（黑/白）=0.1，P（白/黑）=0.2，P（黑/黑）=0.8，求其熵H2（X）.
答案：
問答題
連續(xù)隨機(jī)變量X和Y的聯(lián)合概率密度為：，求H（X）， H（Y）， H（XYZ）和I（X；Y）。
答案：
問答題
每幀電視圖像可以認(rèn)為由3×105個(gè)像素組成，所有像素均是獨(dú)立變化，且每一像素又取128個(gè)不同的亮度電平，并設(shè)亮度電平等概率分布，問每幀含有多少信息量？
答案：
填空題
英文電報(bào)有32個(gè)符號(hào)（26個(gè)英文字母加上6個(gè)字符），即q=32。若r=2，N=1，即對(duì)信源S的逐個(gè)符號(hào)進(jìn)行二元編碼，則每個(gè)英文電報(bào)符號(hào)至少要用（）位二元符號(hào)編碼才行。
答案：5
問答題
有一個(gè)含有8個(gè)消息的無記憶信源，其概率各自為0.2，0.15，0.15，0.1，0.1，0.1，0.1，0.1。試編成兩種三元非延長碼，使它們的平均碼長相同，但具有不同的碼長的方差，并計(jì)算平均碼長和方差，說明哪一種碼更實(shí)用些。
答案：
問答題
若有一信源每秒鐘發(fā)出2.66個(gè)信源符號(hào)。將此信源的輸出符號(hào)送入某一個(gè)二元信道中進(jìn)行傳輸（假設(shè)信道是無噪無損的），而信道每秒鐘只傳遞兩個(gè)二元符號(hào)。試問信源不通過編碼能否直接與信道連接？若通過適當(dāng)編碼能否中在信道中進(jìn)行無失真?zhèn)鬏?？若能連接，試說明如何編碼并說明原因。
答案：
問答題
信源編碼的和信道編碼的目的是什么？
答案：信源編碼的作用：
（1）符號(hào)變換：使信源的輸出符號(hào)與信道的輸入符號(hào)相匹配；
（2）冗余度壓縮：是編碼...
問答題
簡述循環(huán)碼的伴隨式及其性質(zhì)。
答案：
判斷題
連續(xù)信源和離散信源都具有可加性。
答案：正確