表示在输出端接收到Y后，发送端X尚存的平均不确定性。这个对X尚存的不确定性是由于干扰引起的。

在任意时刻信道的输出消息不仅与当时信道的输入消息有关，而且还与以前时刻的信道输入消息和（或）输出消息有关。

在某一时刻信道的输出消息仅与当时的信道输入消息有关，而与前面时刻的信道输入或输出消息无关。

信息是事物运动状态或存在方式的不确定性的描述。

概率分布函数与时间起点无关，平稳信源是有记忆的，记忆的长度有限。

假定随机变量欲裂的长度是有限的，如果信源输出地信息序列中，符号之间的无相互依赖关系，则称这类信源为离散平稳无记忆信源。

一个随机事件发生某一结果后所带来的信息量成为自信息量，定义为其发生概率对数的负值。

信息的数学表达层，它虽不是一个物理量，但是可以定量地加以描述，它是具体物理信号的进一步数学抽象