2.2 擴展信源

前面討論了單符號離散信源，很多實際信源往往輸出的消息是時間或空間的離散隨機序列，有無記憶的離散信源序列，而更多的是有記憶的，即序列中的符號之間有相關性。此時需要用聯合概率分布函數或條件概率分布函數來描述信源發出的符號間的關系。下面討論離散無記憶擴展信源和兩類較簡單的離散有記憶序列信源，即離散平穩信源和馬爾可夫信源。