信息論基礎(chǔ)

1 緒論
  1.1 信息、信息科學(xué)和信息論
  1.2 信息論研究的對(duì)象、目的和內(nèi)容
2 隨機(jī)變量的信息度量
  2.1 自（互）信息和條件自（互）信息
  2.2 離散隨機(jī)變量的平均自信息（熵）
  2.3 離散隨機(jī)變量的平均互信息
  2.4 離散隨機(jī)變量熵和互信息的凸性
  2.5 連續(xù)隨機(jī)變量的互信息和微發(fā)熵
  習(xí)題2
3 離散信源及其信息度量
  3.1 信源的數(shù)學(xué)模型及分類(lèi)
  3.2 離散無(wú)記憶信源的擴(kuò)展信源
  3.3 離散平穩(wěn)有記憶信源
  3.4 馬爾可夫信源
  3.5 信源的相關(guān)性和剩余度
  習(xí)題3
4 離散信源的無(wú)失真編碼
  4.1 信源編碼的概念
  4.2 離散無(wú)記憶信源的漸近等同分割性和等長(zhǎng)編碼定理
  4.3 離散無(wú)記憶信源的不等長(zhǎng)編碼定理
  4.4 離散無(wú)記憶信源的不等長(zhǎng)編碼方法
  4.5 離散平衡信源和馬爾可夫信源的編碼定理
  習(xí)題4
5 信道及信道容量
  5.1 信道的數(shù)學(xué)模型及分類(lèi)
  5.2 離散無(wú)記憶信道及其容量
  5.3 離散無(wú)記憶信道容量的計(jì)算方法
  5.4 信道的組合
  5.5 達(dá)到信道容量時(shí)輸入輸出字母概率分布的惟一性
  5.6 連續(xù)信道及其容量
  習(xí)題5
6 有噪信道編碼
  6.1 錯(cuò)誤概率和譯碼規(guī)則
  6.2 錯(cuò)誤概率與編碼方法
  6.3 有噪信道編碼定理
  習(xí)題6
7 信息率失真函數(shù)和限失真信源編碼
  7.1 離散無(wú)記憶信源的信息率失真函數(shù)
  7.2 離散無(wú)記憶信源信息率失真函數(shù)的計(jì)算
  7.3 連續(xù)信源的信息率失真函數(shù)
  7.4 限失真信源編碼定理
  習(xí)題7
參考文獻(xiàn)