通信的数学理论，涉及信息内容的分析和信息传送、接收、储存和检索全过程。统计学概念，如概率，用以处理额外信息(多余码)，以补救通信过程中产生的假信号(杂音)。^*位(bit)为信息的基本单位，通道容量用以衡量传输媒介(如电报线路)传递信息的能力。信息论是20世纪40年代由克劳德·香农(1916— )提出的。广泛应用于计算机科学和^*控制论(cybernetics)等领域，亦有助于理解从热力学法则到语言的运用等许多科学。