压缩的理论（它与算法信息论密切相关）以及率失真理论，这个领域的研究工作主要是由美國學者克劳德·香农（Claude Elwood Shannon）奠定的，他在二十世纪四十年代末期及五十年代早期发表了这方面的基础性的论文。
tɕhʑk k çɣr qr r ʑk tɕhr ʑr xʑr khqr khqr r qr qɣr khqʑɣ^k ɣ^ʑk tɕhqr ɬqn phr ʁqk tsʁɣk qr r tsʁɣr ɣ^ɣr qɣ^r tɕhr çɣr tɕhʑn ɬqk ɣ^ɣ^k tsr tsʁr tɕhʑr ʁqr tɕhn ɣqr ɣ^n khɣn tsʁɣr χɣr ʑn çɣn khqʑɣ^k ɣ^n (en)klˈɔːd ˈɛlwʊd ʃˈanən(cmn) çqʑr çqɣ^r çɣr ʑk tsʑqr ɣr ʁqn ʁqr ɬqr qr ʁqn qʑn çʑqr r qk ɬqn thr ʁqn qʑn çʑqr tsʑr qk xʑk ɕqʑr ɣr tsʁɣr xʑɣ^k qʑr çɣr ɬqk ʝʁr khqɣ^r çɣr r thɣn