信息论对传播学的启示主要体现在几个方面:一是传播学借用了信息论的核心概念，如信息、编码和解码；其次，虽然香农-韦弗传播模式侧重于工程技术领域，但许多早期学者都受益于这一模式，这对后来的传播模式研究有着深刻的启示,Need基础:概率论，数学基础谈沟通中的两个问题:单个随机变量的熵就是该随机变量的不确定性,01提出信息论最早由美国数学家香农提出,1948年，香农发表了《交流的数学理论》，被视为信息论的奠基之作,信道编码理论,空间信息分析的理论与方法。
01提出信息论最早由美国数学家香农提出。1948年，香农发表了《交流的数学理论》，被视为信息论的奠基之作。他在书中提到了传播与传播的一个基本问题:在另一端准确或近似地再现传播一端选择的信息。如果借用传播学的话，就是传播者的意图能否被接受者理解和解读。香农提出了传播模式，它包含了传播的内部要素及其关系，以及源、信道、目的地、信息、编码、信号等非常重要的概念。信息论对传播学的启示主要体现在几个方面:一是传播学借用了信息论的核心概念，如信息、编码和解码；其次，虽然香农-韦弗传播模式侧重于工程技术领域，但许多早期学者都受益于这一模式，这对后来的传播模式研究有着深刻的启示。
我是北侯大学通信工程专业的大三学生。大一要学完所有的课程。我大二会用到大一的知识，大三会用到大一和大二的知识。主要课程有电路分析基础、通信原理、数字电路与逻辑设计、。空间信息分析的理论与方法。信道编码理论。看，很难学。所以大一大二一定要学好。
3、如何计算熵,条件熵和互信息- 信息论 基础Need 基础:概率论，数学基础谈沟通中的两个问题:单个随机变量的熵就是该随机变量的不确定性。(编码中有多少比特可以完全描述随机变量X) A .均匀分布，编码方式最简单，一个编码对应一种可能，公式可以学习为H=logNb。概率分布不均匀，概率越大，编码比特数越少，Ps:用于决策树的根。公式同上，将概率改为联合概率来定义两个随机变量的条件熵h，即一个随机变量在给定另一个随机变量的条件下的熵，由另一个随机变量引起的原随机变量的不确定性的降低称为互信息。(是不是很难记，其实我从来不记得，看图...)毕业后发现学习速度比读书的时候快了...以上截图来自网络，但我有正版教材(纸质版)，真心希望所有文档都可以电子化发布。
