();平均信息量的计算公式是I=（1/p），其中p是概率，指以二为底的对数。但对信息量作深入而系统研究，还是从年C.E.香农的奠基性工作开始的。在信息论中，认为信源输出的消息是随机的。 ...