黑白氣象傳真圖的消息只有黑色和白色兩種,即信源X={黑,白},設(shè)黑色出現(xiàn)的概率為P(黑)=0.3,白色出現(xiàn)的概率為P(白)=0.7。
(1)假設(shè)圖上黑白消息出現(xiàn)前后沒有關(guān)聯(lián),求熵H(X);
(2)假設(shè)消息前后有關(guān)聯(lián),其依賴關(guān)系為P(白|白)=0.9,P(黑|白)=0.1,P(白|黑)=0.2,P(黑|黑)=0.8,求此一階馬爾克夫信源的熵H2。
(3)分別求上述兩種信源的冗余度,并比較H(X)和H2的大小,并說明其物理意義。
您可能感興趣的試卷
最新試題
高斯分布連續(xù)信源的差熵,以下說法正確的是()。
對(duì)平均功率受限的連續(xù)信道,增大信道容量一般可以()。
二元信源X接到二元對(duì)稱信道,信道輸入隨機(jī)變量X,其中0的概率為w,1的概率為m=1-w,輸出隨機(jī)變量為Y,其中錯(cuò)誤轉(zhuǎn)移概率為p,正確轉(zhuǎn)移概率為q=1-p,則信道輸出Y=0的概率是()。
用符號(hào)集X中的元素,將原始信源S中的符號(hào)變換為相應(yīng)的碼字符號(hào)W,這就是編碼器的功能。
若X、Y、Z組成一個(gè)馬爾可夫鏈,則下列表達(dá)式正確的是()。
差熵在通信前后計(jì)算平均互信息時(shí),替代信息熵做差,替代了信息熵的作用,因此稱為差熵。
下列關(guān)于高斯加性信道的信道容量的陳述正確的是()。
關(guān)于信源的冗余度,下面說法不正確的是()。
對(duì)于有噪無損信道,以下說法正確的是()。
當(dāng)信源概率分布p(x)固定時(shí),平均互信息I(X;Y)是信道轉(zhuǎn)移概率p(y/x)的()函數(shù)。