第1章 绪论

信息论是人们在长期通信工程的实践中，由通信技术与概率论、随机过程和数理统计相结合逐步发展起来的一门新兴科学。信息论的奠基人一般公认为是美国科学家香农（C．E．Shannon），他于 1948年发表的著名论文《通信的数学理论》（“A Mathematical Theory of Communication”）为信息论的诞生和发展奠定了理论基础。在香农信息论的指导下，为提高通信系统信息传输的有效性和可靠性，使系统达到最优化，人们在信源编码、信道编码以及保密编码等领域进行了卓有成效的研究，取得了丰硕的成果。近几十年来，随着信息理论的迅猛发展和信息概念的不断深化，信息论所涉及的内容早已超越了通信工程的范畴，它已渗透到许多学科，日益得到众多领域的科学工作者的重视。

本章首先引出信息的概念，然后讨论了信息论的研究对象、目的和内容，并分析了信息论对信源编码和信道编码研究的指导意义，最后简要回顾了信息论与编码的发展历史。