信息是消息中有效的那部分。
把信息转为电信号的叫换能器。symbol(符号）是离散的。
模拟信号自变量，因变量都是连续的。数字信号两者均离散。
传的信号是模拟信号，模拟通信系统。否则是数字通信系统。
自由空间不能直接传基带信号，要经过调制。调制有三个表目的，一是表达信息，二是符合带宽，三是减少在信道里的衰落。
数字调制系统与模拟调制系统相比多了两个block，一个是信源编码，另一个是信道编码。
数字通信占用的带宽高。
半双工：左或右箭头。全双工：左右箭头。
信息量等于-log2(P)，信息量的单位是比特。信息量是3比特，就需要三位比特来表达一个信息。信源的熵，也就是信源信息量的期望。
离散信源就是一些符号组成的集合。
教材上两种熵一个用频率算的，一个用概率算的。当然概率准了。
信息传输的有效性是指传输的速度，可靠性指准确程度。可靠性和有效性是矛盾的。也是最主要考察的两个指标。
模拟通信系统的有效性用有效传输频带来衡量，类似频带利用率。可靠性用接收机的解调器的输出信噪比来衡量。
数字通信系统的有效性用频带利用率来衡量，频带利用率是单位带宽的传输速率。可靠性用差错率衡量（比如误码率）
信号是与消息相对应的电量，信号是消息的物理载体。
等概率时信源的熵最大。
信息速率是比特每秒，相对于码元速率更实质。但码元速率决定了带宽。
原文：http://www.cnblogs.com/optimization/p/4263058.html