信道容量是信道能無錯誤傳送的最大信息率。
對於只有壹個信源和壹個信宿的單用戶信道,它是壹個數,單位是比特每秒或比特每符號。它代表每秒或每個信道符號能傳送的最大信息量,或者說小於這個數的信息率必能在此信道中無錯誤地傳送。
對於多用戶信道,當信源和信宿都是兩個時,它是平面上的壹條封閉線。當有m個信源和信宿時,信道容量將是m 維空間中壹個凸區域的外界“面”。
信道容量計算思路:
為了評價實際信道的利用率,應具體計算已給信道的容量。這是壹個求最大值的問題。由於互信息對輸入符號概率而言是凸函數,其極值將為最大值,因此這也就是求極值的問題。對於離散信道,P(x)是壹組數,滿足非負性和歸壹性等條件,可用拉格朗日乘子法求得條件極值。
對於連續信道,P(x)是壹函數,須用變分法求條件極值。但是對於大部分信道,這些方法常常不能得到顯式的解,有時還會得到不允許的解,如求得的P(x)為負值等。為了工程目的,常把信道近似表示成某些易於解出容量的模式,如二元對稱信道和高斯信道。
對於連續信道,只需把輸入集和輸出集離散化,就仍可用叠代公式來計算。當然如此形成的離散集,包含的元的數目越多,精度越高,計算將越繁。對於信息論中的其他量,如信息率失真函數,可靠性函數等,都可以用類似的方法得到的各種叠代公式來計算。