信息论:是信息科学的基本理论.从历史上看信息论的形成是两部分人共同努力的结果,一部分是通信工程方面的学者,另一部分是统计数学家,这两部分人虽然研究的是同一领域的问题,但他们感兴趣的方面和侧重点是有差异的.