数据压缩

✍ dations ◷ 2025-09-06 08:19:04 #数据压缩
在计算机科学和信息论中,数据压缩或者源编码是按照特定的编码机制用比未经编码少的数据比特(或者其它信息相关的单位)表示信息的过程。例如,如果我们将“compression”编码为“comp”那么这篇文章可以用较少的数据位表示。常见的例子是ZIP文件格式,此格式不仅仅提供压缩功能,还可作为归档工具(Archiver),能够将许多文件存储到同一个文件中。数据压缩能够实现是因为多数现实世界的数据都有统计冗余。例如,字母“e”在英语中比字母“z”更加常用,字母“q”后面是“z”的可能性非常小。无损数据压缩压缩通常利用了统计冗余,这样就能更加简练地、但仍然是完整地表示发送方的数据。无损数据压缩压缩的压缩率不足以处理庞大体积的音视频数据,但如果允许一定程度的保真度损失,那么还可以实现进一步的压缩。例如,人们看图画或者电视画面的时候可能并不会注意到一些细节并不完善。同样,两个音频录音采样序列可能听起来一样,但实际上并不完全一样。有损数据压缩在可以接受或无法察觉的情况下使用较少的位数表示图像、视频或者音频。然而,经常有一些文件不能被有损数据压缩压缩,实际上对于不含可以辨别样式的数据任何压缩算法都不能压缩。另外,试图压缩已经经过压缩的数据通常得到的结果实际上是增加数据。实际上,有损数据压缩也会最终达到不能工作的地步。例如一个极端的例子:压缩算法每次去掉文件最后一个字节,那么经过这个算法不断的压缩直至文件变空,压缩算法将不能继续工作。由于可以帮助减少如硬盘空间与连接带宽这样的昂贵资源的消耗,所以压缩非常重要,然而压缩需要消耗信息处理资源,这也可能是费用昂贵的。所以数据压缩机制的设计需要在压缩能力、有损度、所需计算资源以及其它需要考虑的不同因素之间进行折衷。对于任何形式的通信来说,只有当信息的发送方和接受方都能够理解编码机制的时候压缩数据通信才能够工作。例如,只有当接受方知道这篇文章需要用汉语字符解释的时候这篇文章才有意义。同样,只有当接受方知道编码方法的时候他才能够理解压缩数据。一种非常简单的压缩方法是行程长度编码,这种方法使用数据及数据长度这样简单的编码代替同样的连续数据,这是无损数据压缩的一个实例。这种方法经常用于办公计算机以更好地利用磁盘空间、或者更好地利用计算机网络中的带宽。对于电子表格、文本、可执行文件等这样的符号数据来说,无损是一个非常关键的要求,因为除了一些有限的情况,大多数情况下即使是一个数据位的变化都是无法接受的。对于视频和音频数据,只要不损失数据的重要部分一定程度的质量下降是可以接受的。通过利用人类感知系统的局限,能够大幅度的节约存储空间并且得到的结果质量与原始数据质量相比并没有明显的差别。这些有损数据压缩方法通常需要在压缩速度、压缩数据大小以及质量损失这三者之间进行折衷。有损图像压缩用于数字相机中,大幅度地提高了存储能力,同时图像质量几乎没有降低。用于DVD的有损MPEG-2编解码视频压缩也实现了类似的功能。在有损音频压缩中,心理声学的方法用来去除信号中听不见或者很难听见的成分。人类语音的压缩经常使用更加专业的技术,因此人们有时也将“语音压缩”或者“语音编码”作为一个独立的研究领域与“音频压缩”区分开来。不同的音频和语音压缩标准都属于音频编解码范畴。例如语音压缩用于因特网电话,而音频压缩被用于CD翻录并且使用MP3播放器解码。压缩的理论(它与算法信息论密切相关)以及率有损理论,这个领域的研究工作主要是由美国学者克劳德·香农(Claude Elwood Shannon)奠定的,他在二十世纪四十年代末期及五十年代早期发表了这方面的基础性的论文。Doyle和Carlson在2000年写到数据压缩“是所有的工程领域最简单、最优美的设计理论之一”。密码学与编码理论也是密切相关的学科,数据压缩的思想与统计推断也有很深的渊源。许多无损数据压缩系统都可以看作是四步模型,有损数据压缩系统通常包含更多的步骤,例如它包括预测、频率变换以及量化。Lempel-Ziv(LZ)压缩方法是最流行的无损存储算法之一。DEFLATE是LZ的一个变体,它针对解压速度与压缩率进行了优化,虽然它的压缩速度可能非常缓慢,PKZIP、gzip以及PNG都在使用DEFLATE。LZW(Lempel-Ziv-Welch)是Unisys的专利,直到2003年6月专利到期限,这种方法用于GIF图像。另外值得一提的是LZR (LZ-Renau) 方法,它是Zip方法的基础。LZ方法使用基于表格的压缩模型,其中表格中的条目用重复的数据串替换。对于大多数的LZ方法来说,这个表格是从最初的输入数据动态生成的。这个表格经常采用霍夫曼编码维护(例如SHRI、LZX)。 当前一个性能良好基于LZ的编码机制是LZX,它用于微软公司的CAB格式。最好的压缩工具将概率模型预测结果用于算术编码。算术编码由芬兰信息理论学家Jorma Rissanen发明,并且由Witten、Neal以及Cleary将它转变成一个实用的方法。这种方法能够实现比众人皆知的哈夫曼算法更好的压缩,并且它本身非常适合于自适应数据压缩,自适应数据压缩的预测与上下文密切相关。算术编码已经用于二值图像压缩标准JBIG、文档压缩标准DejaVu。文本输入系统Dasher是一个逆算术编码器。

相关

  • 五大湖区五大湖地区(Great Lakes Region)是指由环绕北美洲五大湖的加拿大安大略省和美国的伊利诺伊州、印第安纳州、俄亥俄州、密歇根州、明尼苏达州、纽约州、宾夕法尼亚州和威斯康星
  • 温带季风温带季风气候是一种分布于亚欧大陆东部的气候类型。温带季风气候分布于亚欧大陆的温带东部,具体在秦岭淮河以北、大兴安岭——阴山——贺兰山以东以南、日本关东以北,包括华北
  • 古希腊文古希腊语(古希腊语:Ἑλληνικὴ γλῶττα) 指代公元前9世纪至公元6世纪所有以口头及书面为载体的古希腊语族的方言,时间上包括公元前9世纪至公元前6世纪的古风时期,公元
  • 教育部美国教育部(英语:United States Department of Education,缩写:ED),是美国联邦政府主管联邦教育行政事务的行政部门。1979年10月17日,吉米·卡特总统签署生效《教育部组织法》(Depa
  • SAPSAP公司是德国一家软件企业,总部位于德国巴登符腾堡州瓦尔多夫,主营企业资源管理软件,在130个国家设有办事处,在190个国家拥有超过335,000名客户。该公司股票是欧洲Stoxx 50股票
  • 高雄市第三信用合作社林孟丹 理事主席高雄市第三信用合作社(简称高雄三信、三信)是台湾的一家信用合作社,也是高雄目前唯一仅存的信用合作社,总社位于高雄市三民区、营业部位在盐埕埔,分社则开设于高
  • 爱尔兰圣公会爱尔兰教会,或称爱尔兰圣公会,是普世圣公宗团契的一员,普世圣公宗两个母会之一(另一个是英格兰教会)。在普世圣公宗各成员教会中列位第二,在英格兰教会之后。它有12个教区组成。目
  • 狼鳍鱼狼鳍鱼(学名:Lycoptera)是狼鳍鱼科的一种已经灭绝的原始真骨鱼类。约生活于晚侏罗纪-早白垩纪时期。狼鳍鱼体长在10厘米左右,身体呈纺锤形或长纺锤形,背鳍位置靠后,于臀鳍相对,其前
  • 纽约时报诉沙利文案纽约时报诉沙利文案(New York Times Co. v. Sullivan, 376 U.S. 254 (1964)),美国最高法院在此案中确立了要求官员或公众人物在指控媒体报道涉嫌诽谤或侵害名誉时必须遵循的真
  • 莱昂·帕内塔莱昂·爱德华·帕内塔(英语:Leon Edward Panetta,1938年6月28日-),美国第23任国防部长,前任中央情报局局长。帕内塔的父母是来自意大利的移民。1960年莱昂·帕内塔毕业于加州圣克拉