信息論與編碼

第1章緒論

1.1基本概念

1.1.1信息的一般概念

1.1.2香農(nóng)信息定義

1.1.3信息論與編碼技術(shù)發(fā)展簡(jiǎn)史

1.2數(shù)字通信系統(tǒng)模型

1.3信息論與編碼理論研究的主要內(nèi)容和意義

1.3.1信息論研究的主要內(nèi)容

1.3.2香農(nóng)信息論對(duì)信道編碼的指導(dǎo)意義

1.3.3香農(nóng)信息論對(duì)信源編碼的指導(dǎo)意義

思考題與習(xí)題

第2章信源及其熵

2.1信源的數(shù)學(xué)模型和分類

2.1.1信源的數(shù)學(xué)模型

2.1.2信源的分類

2.2離散信源的信息熵及其性質(zhì)

2.2.1自信息

2.2.2信源的信息熵

2.2.3熵的基本性質(zhì)

2.3離散無(wú)記憶信源的擴(kuò)展信源

2.4離散平穩(wěn)信源

2.4.1平穩(wěn)信源的概念

2.4.2二維平穩(wěn)信源

2.4.3一般離散平穩(wěn)信源

2.5連續(xù)信源的信息熵

2.5.1單符號(hào)連續(xù)信源的熵

2.5.2波形信源的熵

2.5.3最大熵定理

2.6信源的冗余度

2.6.1信源效率

2.6.2信源冗余度

思考題與習(xí)題

第3章信道及其容量

3.1信道的數(shù)學(xué)模型與分類

3.1.1信道的分類

3.1.2信道的數(shù)學(xué)模型

3.1.3單符號(hào)離散信道

3.2信道疑義度與平均互信息

3.2.1信道疑義度

3.2.2平均互信息

3.2.3平均互信息的性質(zhì)

3.3離散無(wú)記憶的擴(kuò)展信道

3.4離散信道的信道容量

3.4.1信道容量的定義

3.4.2簡(jiǎn)單離散信道的信道容量

3.4.3對(duì)稱離散信道的信道容量

3.4.4離散無(wú)記憶N次擴(kuò)展信道的信道容量

3.5連續(xù)信道的信道容量

3.5.1連續(xù)單符號(hào)加性高斯噪聲信道的信道容量

3.5.2多維無(wú)記憶加性連續(xù)信道的信道容量

3.5.3限頻限時(shí)限功率的加性高斯白噪聲信道的信道容量

3.6信源與信道的匹配

3.7信道編碼定理(香農(nóng)第二定理)

思考題與習(xí)題

第4章信道編碼

4.1信道編碼的概念

4.1.1信道編碼的分類

4.1.2與糾錯(cuò)編碼有關(guān)的基本概念

4.1.3檢錯(cuò)與糾錯(cuò)原理

4.1.4檢錯(cuò)與糾錯(cuò)方式和能力

4.2線性分組碼

4.2.1線性分組碼的基本概念

4.2.2生成矩陣和一致校驗(yàn)矩陣

4.2.3線性分組碼的譯碼

4.2.4線性分組碼的糾錯(cuò)能力

4.2.5漢明碼

4.3循環(huán)碼

4.3.1循環(huán)碼的多項(xiàng)式描述

4.3.2循環(huán)碼的生成矩陣

4.3.3系統(tǒng)循環(huán)碼

4.3.4多項(xiàng)式運(yùn)算電路

4.3.5循環(huán)碼的編碼電路

4.3.6循環(huán)碼的譯碼電路

4.4常用的循環(huán)碼

4.4.1循環(huán)冗余校驗(yàn)碼

4.4.2BCH碼*

4.4.3RS碼*

4.5卷積碼

4.5.1卷積碼的編碼

4.5.2卷積碼的譯碼

思考題與習(xí)題

第5章信源編碼

5.1信源編碼器和無(wú)失真信源編碼定理

5.1.1碼的分類

5.1.2碼樹

5.1.3Kraft不等式

5.1.4無(wú)失真信源編碼定理(香農(nóng)第一定理)

5.2變長(zhǎng)編碼

5.2.1香農(nóng)碼

5.2.2費(fèi)諾碼

5.2.3霍夫曼碼

5.3實(shí)用信源編碼方法

5.3.1游程編碼

5.3.2算術(shù)編碼

5.3.3預(yù)測(cè)編碼

5.3.4變換編碼

思考題與習(xí)題

第6章信息率失真函數(shù)

6.1失真測(cè)度

6.1.1系統(tǒng)模型

6.1.2失真度和平均失真度

6.2信息率失真函數(shù)及其性質(zhì)

6.2.1信息率失真函數(shù)的定義

6.2.2信息率失真函數(shù)的性質(zhì)

6.3等概率、對(duì)稱失真信源的信息速率失真函數(shù)

6.4保真度準(zhǔn)則下的信源編碼定理

6.5限失真信源編碼（香農(nóng)第三定理）

思考題與習(xí)題

第7章現(xiàn)代信道編碼技術(shù)

7.1Turbo碼

7.1.1Turbo碼的提出

7.1.2Turbo碼編碼器

7.1.3Turbo碼譯碼器

7.2LDPC碼

7.2.1LDPC碼的提出

7.2.2LDPC碼基本概念

7.2.3規(guī)則LDPC碼

7.2.4非規(guī)則LDPC碼

7.2.5準(zhǔn)循環(huán)LDPC碼

7.2.6重復(fù)累積LDPC碼

7.2.7LDPC碼譯碼算法

思考題與習(xí)題

第8章MATLAB在信息論與編碼分析中的應(yīng)用

8.1MATLAB基礎(chǔ)

8.1.1MATLAB語(yǔ)言特點(diǎn)

8.1.2MATLAB運(yùn)行環(huán)境簡(jiǎn)介

8.1.3MATLAB基礎(chǔ)

8.2MATLAB在信息理論分析中的應(yīng)用

8.2.1離散信源的MATLAB分析

8.2.2離散信道的MATLAB分析

8.2.3應(yīng)用MATLAB進(jìn)行信息理論分析的實(shí)例

8.3MATLAB在編碼技術(shù)分析中的應(yīng)用

8.3.1信源編碼技術(shù)的MATLAB分析

8.3.2信道編碼技術(shù)的MATLAB仿真

8.3.3應(yīng)用MATLAB進(jìn)行編碼技術(shù)分析的實(shí)例

思考題與習(xí)題

參考文獻(xiàn)