什么是信息 信息量 熵 信道容量?

时间:2018-09-12 08:25:32 关键词:信道,信息量,容量

什么是信息、信息量、熵、信道容量?

答案解析

事物的信息是指该事物的状态和状态的变化方式,包括状态和方式的外在形式、内在含义和实际效用。假设一个信息源所产生的符号序列中的符号取自一个有限符号集,符号集中的符号Si所发生的概率为p(Si),则其所携带的信息量I定义为I=log2(1/p)。平均信息量H记为熵。最大通信速度称为信道容量C(有公式)。