【資料名稱(chēng)】：工程信息論 非掃描高清無(wú)碼

【資料作者】：田寶玉

【資料日期】：2011

【資料語(yǔ)言】：中文

【資料格式】：PDF

【資料目錄和簡(jiǎn)介】：


目錄
第 1 章緒 論
1 .1信 息 的 概 念 和 主 要 特 征
1
1 .1 .1概 述
1
1 .1 .2信 息 的 基 本 概 念 和 特 征
2
1 .1 .3信 息 論 的 基 本 內(nèi) 容
3
1 .2通 信 系 統(tǒng) 的 模 型
3
1 .2 .1通 信 系 統(tǒng) 模 型
4
1 .2 .2提 高 通 信 系 統(tǒng) 技 術(shù) 指 標(biāo) 的 措 施
5
1 .3仙 農(nóng) 信 息 論 所 研 究 的 問(wèn) 題
6
1 .3 .1仙 農(nóng) 信 息 論 所 研 究 的 問(wèn) 題
6
1 .3 .2仙 農(nóng) 信 息 論 的 特 點(diǎn)
1 .4仙 農(nóng) 信 息 論 形 成 與 發(fā) 展
7
7
1 .4 .1技 術(shù) 背 景
1 .4 .2理 論 背 景
7
7
1 .4 .3仙 農(nóng) 的 主 要 工 作
1 .4 .4仙 農(nóng) 信 息 論 發(fā) 展
7
8
1 .4 .5信 息 論 的 應(yīng) 用
9
1 .5仙 農(nóng) 生 平 簡(jiǎn) 介 與 研 究 風(fēng) 格
9
1 .5 .1仙 農(nóng) 生 平 簡(jiǎn) 介
9
1 .5 .2仙 農(nóng) 的 學(xué) 術(shù) 風(fēng) 格10
第 2 章離 散 信 息 的 度 量
2 .1自 信 息 和 條 件 自 信 息11
2 .1 .1自 信 息11
2 .1 .2聯(lián) 合 自 信 息 12
2 .1 .3條 件 自 信 息 12
2 .2互 信 息 和 條 件 互 信 息13
2 .2 .1互 信 息13
2 .2 .2互 信 息 的 性 質(zhì)13
2 .2 .3條 件 互 信 息 14
2 .3離 散 集 合 的 平 均 自 信 息 ( 熵 )15
2 .3 .1信 息 熵15
2 .3 .2條 件 熵15
2 .3 .3聯(lián) 合 熵15
2 .3 .4信 息 熵 與 熱 熵 的 關(guān) 系16
2 .4熵 的 基 本 性 質(zhì)16
2 .4 .1凸 函 數(shù)16
2 .4 .2信 息 散 度18
2 .4 .3熵 的 基 本 性 質(zhì)19
2 .4 .4各 類(lèi) 熵 的 關(guān) 系20
2 .4 .5熵 函 數(shù) 的 惟 一 性21
2 .5離 散 集 的 平 均 互 信 息21
2 .5 .1集 合 與 事 件 之 間 的 互 信 息 21
2 .5 .2平 均 互 信 息 21
2 .5 .3平 均 互 信 息 與 熵 的 關(guān) 系22
2 .5 .4平 均 互 信 息 的 性 質(zhì) 22
2 .5 .5平 均 條 件 互 信 息24
本 章 小 結(jié)
25
習(xí) 題26
第 3 章離 散 信 源
3 .1信 源 的 分 類(lèi) 與 數(shù) 學(xué) 模 型 30
3 .1 .1信 源 的 分 類(lèi) 30
3 .1 .2信 源 的 數(shù) 學(xué) 模 型30
3 .2離 散 無(wú) 記 憶 信 源 31
3 .2 .1單 符 號(hào) 離 散 無(wú) 記 憶 信 源31
3 .2 .2多 維 離 散 無(wú) 記 憶 信 源32
3 .3離 散 無(wú) 記 憶 信 源 的 擴(kuò) 展 源32
3 .3 .1N 次 擴(kuò) 展 源
32
3 .3 .2N 次 擴(kuò) 展 信 源 的 熵
33
3 .4無(wú) 限 離 散 信 源33
*
本 章 小 結(jié)
53
附 錄定 理 3. 4. 2 的 證 明 54
習(xí) 題55
第 4 章離 散 信 道 及 其 容 量
4.1信道 模 型 及 其 分 類(lèi) 59
4.1 .1信 道 模 型59
4.1 .2信 道 的 分 類(lèi)59
4.2離散 無(wú) 記 憶 信 道61
4 .2 .1一 般 信 道 的 數(shù) 學(xué) 模 型61
4 .2 .2離 散 無(wú) 記 憶 信 道61
4 .2 .3平 穩(wěn) ( 或 恒 參 ) 信 道 61
4 .2 .4單 符 號(hào) 離 散 信 道61
4 .2 .5離 散 無(wú) 記 憶 擴(kuò) 展 信 道63
4 .3擴(kuò) 展 信 道 輸 入 與 輸 出 平 均 互 信 息64
4 .4級(jí) 聯(lián) 信 道 67
4 .5離 散 無(wú) 記 憶 信 道 容 量69
4 .5 .1信 道 容 量 的 定 義69
4.5.2離 散 無(wú) 噪 信 道 的 容 量 69
4.5.3信 道 容 量 的 計(jì) 算70
4.5.4離 散 對(duì) 稱(chēng) 信 道 的 容 量 73
4.5.5離 散 無(wú) 記 憶N 次 擴(kuò) 展 信 道 的 容 量76
4.5.6離 散 并 聯(lián) 信 道 的 容 量 76
4.5.7和 信 道 的 容 量 76
4.5.8關(guān) 于 信 道 容 量 的 注 釋 78
4 .6信道 容 量 的 迭 代 計(jì) 算78
本 章 小 結(jié)
80
附 錄定 理 4. 5. 1 的 證 明
82
習(xí) 題83
第 5 章無(wú) 失 真 信 源 編 碼
5 .1概 述87
5 .1 .1無(wú) 失 真 信 源 編 碼 的 分 類(lèi)87
5 .1 .2信 源 編 碼 器 模 型87
5 .1 .3簡(jiǎn) 單 信 源 編 碼 器 舉 例88
5 .2分 組 碼89
5 .2 .1分 組 碼 的 性 質(zhì)89
5 .2 .2碼 樹(shù) 90
5 .3定 長(zhǎng) 碼91
5 .3 .1無(wú) 失 真 編 碼 條 件91
5 .3 .2信 源 序 列 分 組 定 理 92
5 .3 .3漸 進(jìn) 均 分 特 性94
5 .3 .4定 長(zhǎng) 碼 信 源 編 碼 定 理94
5 .4變 長(zhǎng) 碼97
5 .4 .1異 前 置 碼 的 性 質(zhì)97
5 .4 .2變 長(zhǎng) 碼 信 源 編 碼 定 理99
5 .5最 優(yōu) 碼

1 02
5 .5 .1二 元 哈 夫 曼 ( H uff ma n ) 編 碼

1 02
5 .5 .2多 元 哈 夫 曼 編 碼

1 05
5 .5 .3馬 氏 源 的 編 碼

1 06
*5 .6算 術(shù) 編 碼

1 08
5. 6. 1積 累 概 率1 08
5. 6. 2算 術(shù) 編 碼 的 性 能1 12
5. 6. 3算 術(shù) 編 碼 和 譯 碼 算 法 1 13
5. 6. 4一 般 馬 氏 源 的 算 術(shù) 編 碼1 15
5. 6. 5算 術(shù) 編 碼 算 法 實(shí) 現(xiàn) 中 的 技 術(shù) 問(wèn) 題1 16
5 .7L♀Z. 編 碼

1 16
5. 7. 1L♀Z. 算 法 簡(jiǎn) 介

1 17
5. 7. 2一 種 簡(jiǎn) 化 的 LZ W 算 法

1 17
5 .8文 本 樹(shù) 加 權(quán) 編 碼

1 21
5 .8 .1二 元 序 列 概 率 的 估 計(jì)

1 21
5 .8 .2樹(shù) 信 源 和 文 本 樹(shù)

1 21
5 .8 .3文 本 樹(shù) 加 權(quán) 編 碼 的 實(shí) 現(xiàn)

1 25
5 .8 .4文 本 樹(shù) 加 權(quán) 編 碼 的 性 能 評(píng) 估

1 26
本 章 小 結(jié)本 章 參 考 文 獻(xiàn)習(xí) 題
第 6 章有 噪 信 道 編 碼
1 26
1 28
1 28

6 .1概 述

1 31
6 .1 .1信 息 傳 輸 速 率

1 32
6 .1 .2單 符 號(hào) 判 決 規(guī) 則

1 33
6 .1 .3譯 碼 錯(cuò) 誤 概 率

1 33
6 .2常 用 判 決 準(zhǔn) 則

1 34
6 .2 .1最 大 后 驗(yàn) 概 率 準(zhǔn) 則

1 34
6 .2 .2最 大 似 然 準(zhǔn) 則
6 .3費(fèi) 諾 ( F a n o ) 不 等 式


1 34
1 36
6. 3. 1信 道 疑 義 度
6. 3. 2費(fèi) 諾 不 等 式


1 36
1 36
6. 3. 3序 列 費(fèi) 諾 不 等 式
6 .4序 列 的 最 佳 譯 碼 準(zhǔn) 則


1 38
1 38
6 .4 .1漢 明 距 離

1 38
6 .4 .2序 列 最 大 似 然 譯 碼

1 39
6 .5有 噪 信 道 編 碼 定 理
6 .5 .1聯(lián) 合 典 型 序 列


1 40
1 40
6 .5 .2有 噪 信 道 編 碼 定 理

1 41
6 .5 .3無(wú) 失 真 信 源 信 道 編 碼 定 理

1 44
本 章 小 結(jié)
1 45
習(xí) 題
第 7 章連 續(xù) 信 息 與 連 續(xù) 信 源
1 46

7 .1連 續(xù) 隨 機(jī) 變 量 的 互 信 息

1 50
7 .1 .1連 續(xù) 隨 機(jī) 變 量 的 離 散 化
7 .1 .2連 續(xù) 隨 機(jī) 變 量 的 互 信 息


1 50
1 51
7 .1 .3連 續(xù) 集 合 平 均 互 信 息 的 性 質(zhì)

1 52
7 .2連 續(xù) 隨 機(jī) 變 量 集 合 的 熵

1 52
7 .2 .1連 續(xù) 隨 機(jī) 變 量 集 合 的 熵

1 52
7 .2 .2差 熵 的 性 質(zhì)

1 54
7 .2 .3信 息 散 度

1 56
7 .2 .4差 熵 與 平 均 互 信 息 的 關(guān) 系

1 56
7 .2 .5線 性 變 換 下 平 均 互 信 息 的 不 變 性

1 56
7 .3離 散 時(shí) 間 高 斯 信 源 的 熵

1 57
7 .3 .1一 維 高 斯 隨 機(jī) 變 量 集 合 的 熵

1 57
7 .3 .2多 維 獨(dú) 立 高 斯 隨 機(jī) 變 量 集 合 的 熵
7 .3 .3多 維 相 關(guān) 高 斯 隨 機(jī) 變 量 集 合 的 熵


1 57
1 57
*7 .3 .4復(fù) 高 斯 信 源 的 熵

1 59
7 .4連 續(xù) 最 大 熵 定 理

1 61
7 .4 .1限 功 率 最 大 熵 定 理
7 .4 .2限 峰 值 最 大 熵 定 理


1 61
1 62
7 .5連 續(xù) 時(shí) 間 波 形 的 正 交 展 開(kāi)

1 63
7 .6連 續(xù) 時(shí) 間 信 源 的 熵

1 66
7 .6 .1限 帶 高 斯 白 噪 聲 信 源 的 熵

1 66
7 .6 .2限 帶 高 斯 信 源 的 熵

1 67
7 .6 .3熵 功 率

1 68
7 .7最 大 熵 原 理 與 最 大 熵 譜 估 計(jì)

1 68
7. 7. 1最 大 熵 原 理1 69
7 .7 .2最 大 熵 譜 估 計(jì) 1 69
7 .8離 散 集 合 與 連 續(xù) 集 合 之 間 的 互 信 息 1 71
7. 8. 1離 散 事 件x 與 連 續(xù) 事 件 y 之 間 的 互 信 息 1 71
7 .8 .2離 散 集 合 X 與 連 續(xù) 集 合 Y 的 平 均 互 信 息 1 71
本 章 小 結(jié) 1 72
本 章 參 考 文 獻(xiàn)1 72
附 錄復(fù) 矢 量 到 實(shí) 矢 量 的 變 換 及 其 性 質(zhì)1 73
習(xí) 題
第 8 章波 形 信 道
1 73
*
*第 9 章信 息 率 失 真 函 數(shù)
9 .1概 述

2 13
9 .1 .1系 統(tǒng) 模 型
9 .1 .2失 真 測(cè) 度


2 13
2 14
9 .2信 息 率 失 真 函 數(shù)

2 15
9 .2 .1信 息 率 失 真 函 數(shù)

2 15
9 .2 .2R( D) 的 性 質(zhì)
2 16
9 .3限 失 真 編 碼 定 理

2 19
9 .3 .1編 碼 速 率 的 壓 縮

2 19
9 .3 .2限 失 真 信 源 編 碼 定 理

2 20
9 .3 .3限 失 真 信 源 信 道 編 碼 定 理

2 22
9 .4離 散 信 源 信 息 率 失 真 函 數(shù) 的 計(jì) 算

2 23
9 .4 .1R( D) 參 量 表 示 法 求 解
2 24
9 .4 .2方 程 的 解 法

2 25
9 .4 .3參 量 s 的 意 義

2 26
9 .5連 續(xù) 信 源 信 息 率 失 真 函 數(shù)

2 29
9 .5 .1信 息 率 失 真 函 數(shù) 與 性 質(zhì)

2 29
9 .5 .2R( D) 函 數(shù) 的 計(jì) 算
2 29
9 .5 .3差 值 失 真 測(cè) 度

2 31
9 .6高 斯 信 源 的 R ( D) 函 數(shù)

2 31
9. 6. 1離 散 時(shí) 間 無(wú) 記 憶 高 斯 信 源

2 32
9. 6. 2獨(dú) 立 并 聯(lián) 高 斯 信 源

2 33
9. 6. 3有 記 憶 高 斯 信 源

2 35
9. 6. 4時(shí) 間 連 續(xù) 高 斯 信 源

2 36
9. 6. 5限 帶 高 斯 信 源

2 37
9 .7一 般 連 續(xù) 信 源 R ( D) 函 數(shù)

2 38
9 .8有 損 數(shù) 據(jù) 壓 縮

2 38
9 .8 .1量 化

2 39
9 .8 .2最 佳 速 率 分 配

2 39
9 .8 .3預(yù) 測(cè) 編 碼
9 .8 .4子 帶 編 碼
9 .8 .5變 換 編 碼



2 40
2 41
2 42
本 章 小 結(jié)
2 42
附 錄 1關(guān) 于 Pe 的 計(jì) 算

2 43
附 錄 2定 理 9. 7. 1 的 證 明

2 45
本 章 參 考 文 獻(xiàn)習(xí) 題
第 10 章有 約 束 信 道 及 其 編 碼
10 .1標(biāo) 號(hào) 圖 及 性 質(zhì)
2 46
2 47
2 50
*
附 錄定 理 10. 2. 2 的 證 明

2 85
本 章 參 考 文 獻(xiàn)
2 87
習(xí) 題
第 11 章空 時(shí) 信 道 的 容 量 與 空 時(shí) 碼
2 87
11 .1空時(shí) 無(wú) 線 系 統(tǒng)2 90
11 .2衰落 多 徑 信 道 的 統(tǒng) 計(jì) 模 型2 91
11.2.1多 徑 信 道 描 述 參 數(shù) 2 91
11.2.2頻 率 非 選 擇 性 信 道 2 92
11.2.3頻 率 選 擇 性 信 道2 93
11.2.4衰 落 信 號(hào) 分 量 的 統(tǒng) 計(jì) 模 型 2 94
11 .3確定 性 M IM O 信 道 的 容 量 2 95
11.3.1M I MO 信 道 模 型2 95
11.3.2發(fā) 射 機(jī) 未 知 CSI 的 容 量2 96
11.3.3發(fā) 射 機(jī) 已 知 CSI 的 容 量2 97
11.3.4SIM O 系 統(tǒng) 的 容 量 2 98
11.3.5M IS O 系 統(tǒng) 的 容 量 2 99
11 .4衰落 M IM O 信 道 的 容 量3 00
11.4.1容 量 的 定 義 3 00
11.4.2容 量 的 計(jì) 算 3 01
11.4.3影 響 信 道 容 量 的 因 素3 04
11 .5空時(shí) 接 收 機(jī)3 05
11.5.1CSI 對(duì) 發(fā) 射 機(jī) 和 接 收 機(jī) 均 已 知 情 況3 05
11.5.2信 道 狀 態(tài) 僅 對(duì) 接 收 機(jī) 已 知 的 情 況 3 05
11 .6空時(shí) 信 道 的 編 碼 3 08
11.6.1空 時(shí) 編 碼 器 3 08
11.6.2空 時(shí) 塊 碼3 09
11.6.3空 時(shí) 格 碼3 11
11.6.4空 間 復(fù) 用 編 碼3 12
11.6.5可 達(dá) 容 量 的 比 較3 13







工程信息論（清晰）- 田寶玉.pdf (2.48 MB)