现代信息论的创始

现代信息论的创始

当今世界已步入信息化时代，或者说我们的社会已经是一个信息化社会。如今是手机、互联网、电视等传递信息的工具随处可见，信息的高速传递也改变着人们的生活方式，推动着社会向前发展。

人们对于信息的认识和利用，可以追溯到古代的通讯实践。自古以来，人类就不断的接受来自自然和社会方方面面的信息，中国古代的“烽燧相望”和古罗马地中海诸城市的“悬灯为号”，可以说是传递信息的原始方式。

随着科学技术的进步，人类对物质、能量都有了比较科学的认识，并取得了相应的理论和技术成果。比如，人类很早就知道用“秤”或者“天平”，计量物质质量的多少。然而，我们关于热、燃料、能力、活力等计量的问题，直到工业革命后的19世纪中期，随着热功当量的明确和能量守恒定律的确立才逐渐清楚起来。“能量”一词就是它们的总称，而计量能量问题也通过“卡、焦耳”等新单位的出现来得到解决。

同时，我们关于图画、文字、数字、声音等方面的知识也有几千年了。但是，它们的总称是什么？如何统一计量它们的数量，直至19世纪末还没有正确提出来，更谈不上如何解决了。

20世纪中期，随着电报、照片，无线电、电话、雷达、电视等新事物的出现和发展，计量讯号中信息多少的问题也被提到日程上。20世纪20年代，由于社会生产的发展，人们对传递信息的要求急剧增加，可信息的理论和技术却相对的发展较慢。如何提高传递信息的能力和可靠性，已经成为当时普遍重视的研究课题。于是，有些国家的科学家在这种形势下，努力探索关于信息方面的问题，并在这方面做出了重要贡献。其中，特别值得一提的是美国数学家申农。1948年，申农的著作《关于通讯的数学理论》一书出版，使信息论产生了巨大影响，并被认为是新兴科学的诞生。申农第一次从理论上阐明了通讯的基本问题，提出通讯系统的数学模型，并找到了度量概率信息的公式，为概率信息的定量研究提供了理论根据。这门科学所揭示的规律具有高度的普遍性，因而超出了通讯技术的范围，并被迅速应用于生物学、生理学、心理学、语言学和经济学等不同的领域，取得了丰硕成果。

20世纪70年代以来，随着数学计算机的广泛应用和社会信息化的迅速发展，信息论正在逐渐突破申农狭义信息论的范围，发展成为一门不仅研究语法信息，而且研究语义信息和语用信息的科学。这门科学尽管现在还很不完善，但是可以肯定，在社会实践的推动下，经过各式各样的发展，必将以日益完善的方式把握信息现象和信息过程的本质特性。