齐夫定律

✍ dations ◷ 2025-11-25 03:01:50 #离散分布,计算语言学,幂定律,统计学定律,实证定律,概率分布尾,计量语言学,书目计量学,经验定律

齐夫定律(英语:Zipf's law,IPA/ˈzɪf/)是由哈佛大学的语言学家乔治·金斯利·齐夫(George Kingsley Zipf)于1949年发表的实验定律。它可以表述为:在自然语言的语料库里,一个单词出现的频率与它在频率表里的排名成反比。所以,频率最高的单词出现的频率大约是出现频率第二位的单词的2倍,而出现频率第二位的单词则是出现频率第四位的单词的2倍。这个定律被作为任何与幂定律概率分布有关的事物的参考。

最简单的齐夫定律的例子是“1/ function”。给出一组齐夫分布的频率,按照从最常见到非常见排列,第二常见的频率是最常见频率的出现次数的½,第三常见的频率是最常见的频率的1/3,第n常见的频率是最常见频率出现次数的1/n。然而,这并不精确,因为所有的项必须出现一个整数次数,一个单词不可能出现2.5次。

在布朗语料库(英语:Brown Corpus)中,“the”、“of”、“and”是出现频率最前的三个单词,其出现的频数分别为69971次、36411次、28852次,大约占整个语料库100万个单词中的7%、3.6%、2.9%,其比例约为6:3:2。大约占整个语料库的7%(100万单词中出现69971次)。满足齐夫定律中的描述。仅仅前135个字汇就占了Brown语料库的一半。

齐夫定律是一个实验定律,而非理论定律,可以在很多非语言学排名中被观察到,例如不同国家中城市的数量、公司的规模、收入排名等。但它的起因是一个争论的焦点。齐夫定律很容易用点阵图观察,坐标分别为排名和频率的自然对数(log)。比如,“the”用上述表述可以描述为x = log(1), y = log(69971)的点。如果所有的点接近一条直线,那么它就遵循齐夫定律。

主要:

次要:

相关

  • 陈大可陈大可(1957年9月-),中国海洋科学家。他于1990年代开始参加“热带海洋与全球大气”计划,在哥伦比亚大学的厄尔尼诺-南方振荡现象预测系统的基础上,领导设计了新的预测系统。他还研
  • 三板桥三板桥,是台北市的一个旧地名,位于今中山区的西南部,以及中正区的东北部,范围大致包括中山区正得里、正守里、正义里的全部、康乐里的西半部,以及中正区梅花里、幸福里、幸市里、
  • span class=nowrapEuClsub3/sub/span三氯化铕又称氯化铕(III)、氯化铕(化学式:EuCl3),是稀土金属铕(III)的氯化物。氯化铕是黄色的固体,低于或等于熔点时会分解生成氯化铕(II)(EuCl2)。它有强烈的吸水性,无水物暴露在潮
  • 心包叩击音心包叩击音(pericardial knock)是指在第二心音后约0.09~0.12s出现的响亮、短促的中频额外心音,在胸骨左缘容易闻及。是心包积液或心包增厚阻碍心室舒张,致使心室舒张过程骤然终止
  • 西部黑犀西部黑犀(学名:Diceros bicornis longipes),又名西部黑犀牛或西非黑犀牛,是黑犀最稀有的亚种。它们曾一度广泛分布在非洲中西部的大草原,但因被大量猎杀而致数量急速下降,并于2006
  • 特例市特例市(日语:特例市/とくれいし Tokurei shi */?)为日本曾有的城市自治制度之一,自2000年开始实施,可拥有较一般的市更多原本属于都道府县的权限,但权限少于中核市。在2015年4月1
  • 贝蒂·威廉斯伊丽莎白·“贝蒂”·威廉斯(Elizabeth "Betty" Williams,1943年5月22日-2020年3月17日),婚前姓史密斯(Smyth),英国社会活动家和人权主义者,曾因与梅里德·科里根一起创立和平人社团
  • 邓德俊邓德俊(越南语:Đặng Đức Tuấn/.mw-parser-output .han-nom{font-family:"Nom Na Tong","Han-Nom Gothic","Han-Nom Ming","HAN NOM A","HAN NOM B","Ming-Lt-HKSCS-UNI-H"
  • 米卡·瓦尔塔里米卡·托伊米·瓦尔塔里(芬兰语:Mika Toimi Waltari,1908年9月19日-1979年8月26日),芬兰著名历史小说家。最有名的作品是《埃及人西努黑》(芬兰语:Sinuhe egyptiläinen)。
  • 魔塔大陆 在世界终结续咏诗篇的少女《魔塔大陆 在世界终结续咏诗篇的少女》(日版名:アルトネリコ 世界の終わりで詩い続ける少女,英文版名:Ar tonelico: Melody of Elemia)是日本的GUST及万普(现万代南梦宫娱乐)所共