網站首頁 健康小知識 母嬰教育 起名 運動知識 職場理財 情感生活 綠色生活 遊戲數碼 美容 特色美食 愛好

資訊論與編碼之求自資訊量

欄目: 學習交流 / 發佈於: / 人氣:1.15W

題目設一離散無記憶信源,然後告訴我們它發出的消息爲多少,讓我們求這個消息的自資訊量和每個符號攜帶的自資訊量,今天小編就來跟大家介紹一下它的求法。

資訊論與編碼之求自資訊量

操作方法

(01)首先分析題意,信源是無記憶的,因此發出的各消息之間是互相獨立的,此時發出的消息的自資訊量即爲各消息的自資訊量。

資訊論與編碼之求自資訊量 第2張

(02)當a0=0時,求出它包含的資訊量爲1.415。

資訊論與編碼之求自資訊量 第3張

(03)當a1=1時,求出它包含的資訊量爲2。

資訊論與編碼之求自資訊量 第4張

(04)a2=2時,求出它包含的資訊量爲2。

資訊論與編碼之求自資訊量 第5張

(05)a3=3時,它包含的資訊量爲3,如下圖所示。

資訊論與編碼之求自資訊量 第6張

(06)在發出的消息中,總結出0,1,2,3各有14,13,12,6個,可以得出總得資訊量。

資訊論與編碼之求自資訊量 第7張

(07)共有45個符號,所以平均每個符號所帶的自資訊量爲上式的答案除以45。

資訊論與編碼之求自資訊量 第8張