齐夫定律

✍ dations ◷ 2025-11-28 14:04:18 #离散分布,计算语言学,幂定律,统计学定律,实证定律,概率分布尾,计量语言学,书目计量学,经验定律

齐夫定律(英语:Zipf's law,IPA/ˈzɪf/)是由哈佛大学的语言学家乔治·金斯利·齐夫(George Kingsley Zipf)于1949年发表的实验定律。它可以表述为:在自然语言的语料库里,一个单词出现的频率与它在频率表里的排名成反比。所以,频率最高的单词出现的频率大约是出现频率第二位的单词的2倍,而出现频率第二位的单词则是出现频率第四位的单词的2倍。这个定律被作为任何与幂定律概率分布有关的事物的参考。

最简单的齐夫定律的例子是“1/ function”。给出一组齐夫分布的频率,按照从最常见到非常见排列,第二常见的频率是最常见频率的出现次数的½,第三常见的频率是最常见的频率的1/3,第n常见的频率是最常见频率出现次数的1/n。然而,这并不精确,因为所有的项必须出现一个整数次数,一个单词不可能出现2.5次。

在布朗语料库(英语:Brown Corpus)中,“the”、“of”、“and”是出现频率最前的三个单词,其出现的频数分别为69971次、36411次、28852次,大约占整个语料库100万个单词中的7%、3.6%、2.9%,其比例约为6:3:2。大约占整个语料库的7%(100万单词中出现69971次)。满足齐夫定律中的描述。仅仅前135个字汇就占了Brown语料库的一半。

齐夫定律是一个实验定律,而非理论定律,可以在很多非语言学排名中被观察到,例如不同国家中城市的数量、公司的规模、收入排名等。但它的起因是一个争论的焦点。齐夫定律很容易用点阵图观察,坐标分别为排名和频率的自然对数(log)。比如,“the”用上述表述可以描述为x = log(1), y = log(69971)的点。如果所有的点接近一条直线,那么它就遵循齐夫定律。

主要:

次要:

相关

  • RNA引擎SAGE(战略动作游戏引擎,Strategy Action Game Engine)是西木工作室(Westwood Studios)和艺电(EA)用于即时战略游戏的游戏引擎。引擎的第一个版本是W3D (Westwood 3D),是SurRender 3D
  • 圩田围垦又称围海造田,是指在沿江河、沿湖或沿海的区域通过修筑堤坝(或海塘),再将河水、湖水或海水排出,以取得可利用土地的一项工程方式;与之相对的,将土砂或废弃物倒入海中则是“填海
  • 火山口火山口是火山活动时地下高温物质喷到地面的出口。火山口一般位于火山锥顶部或侧面,在火山喷发停止后由于地下通道中的熔岩冷凝收缩,火山口形成环形凹陷的区域;口内有陡峭的内壁
  • 武装行动22009年5月29日《武装突袭2》(英语:ArmA 2,港台译作“武装行动2”)是一款由波希米亚互动工作室开发的军事模拟游戏。通常它被认为是继《武装突袭》之后《闪点行动:冷战危机》系列
  • 焦亚硫酸焦亚硫酸,严格地说是偏二亚硫酸,是一种硫的含氧酸,化学式为H2S2O5。焦亚硫酸和硫代硫酸一样,不能以游离态存在。与焦硫酸不同的是其中两个硫原子直接相连。
  • TG21型柴油机车TG21型柴油机车(俄语:ТГ21)是苏联的窄轨干线柴油机车车型之一,由柳季诺沃斯基内燃机车制造厂设计制造,运用于萨哈林铁路。共计7台机车,其中1台为TG21型,另外6台称为TG22型(俄语:Т
  • 小小大星球2《小小大星球2》(英语:LittleBigPlanet 2)为索尼旗下的Media Molecule所开发的动作冒险游戏,由索尼欧洲部发行,适用PlayStation 3平台。《小小大星球2》是 2008年10月推出的小小
  • 腰纹猪齿鱼腰纹猪齿鱼,为辐鳍鱼纲鲈形目隆头鱼亚目隆头鱼科的其中一种,分布于中西太平洋区的菲律宾及东印度群岛海域,栖息深度可达20米,本鱼最大特征是体侧具有一宽的灰白条纹,从胸鳍基部延
  • 九芎林 (新北市)九芎林,是新北市坪林区的一个地名,位于该区东南部,范围大致为石�里东北半部。九芎林全境位于�鱼堀溪流域范围内。台湾清治末期,九芎林地区为一街庄,称为“九芎林庄”,隶属于文山堡。
  • asm.jsasm.js是一个中间语言,设计目的是使采用C等编程语言编写的计算机软件可运行为网络应用程序,同时性能特征明显优于标准JavaScript。asm.js包括一个JavaScript的严格子集,其中的