香农对于通信系统研究的论文建立了信息论的基础。他在1941到1944年这三年内持续对通信和密码进行了深入的研究,并且使用了概率论的方法来研究通信系统,揭示了信息就是通信系统传递的对象,并且科学的定量描述了信息,提出了信息熵的概念。还指出了在噪声下如何有效而可靠地传送信息这一通信系统的核心问题,而编码等则是实现这一目标的主要方法。36013
在研究信源编码前信道编码已更早得到了的研究。香农于1948年提出了无失真信源编码定理,同时他也给出了简单的编码方法——香农码。1952年费诺(Fano)和哈夫曼(Huffman)分别提出了各自的编码方法,并证明其方法都是最佳编码法。香农于1959年的文章《Coding theorems for a discrete source with a fidelity criterion》系统地提出了信息率失真理论和限失真信源编码定理。信源编码的日后各种研究通过这两个理论奠定了基础。对于各种信源的特性,伴随着传输内容和传输信道的快速发展,大量实用高效的信源编码方法为人们所提出。论文网
近30年来,信息论这一领域的研究日益加深,大量的论文被人们发表,从而致使多用户信息论的理论得到了完整。
如今,正加紧开发研究包括数字高清晰度和准数字电视电视在内的数字电视体系。家喻户晓的数字电视系统它的核心便是信源编码,信源编码决定了数字电视的格式和信号编码效率,并且令数字电视的实现成为可能。