齐夫定律

✍ dations ◷ 2025-02-24 04:38:45 #离散分布,计算语言学,幂定律,统计学定律,实证定律,概率分布尾,计量语言学,书目计量学,经验定律

齐夫定律(英语:Zipf's law,IPA/ˈzɪf/)是由哈佛大学的语言学家乔治·金斯利·齐夫(George Kingsley Zipf)于1949年发表的实验定律。它可以表述为:在自然语言的语料库里,一个单词出现的频率与它在频率表里的排名成反比。所以,频率最高的单词出现的频率大约是出现频率第二位的单词的2倍,而出现频率第二位的单词则是出现频率第四位的单词的2倍。这个定律被作为任何与幂定律概率分布有关的事物的参考。

最简单的齐夫定律的例子是“1/ function”。给出一组齐夫分布的频率,按照从最常见到非常见排列,第二常见的频率是最常见频率的出现次数的½,第三常见的频率是最常见的频率的1/3,第n常见的频率是最常见频率出现次数的1/n。然而,这并不精确,因为所有的项必须出现一个整数次数,一个单词不可能出现2.5次。

在布朗语料库(英语:Brown Corpus)中,“the”、“of”、“and”是出现频率最前的三个单词,其出现的频数分别为69971次、36411次、28852次,大约占整个语料库100万个单词中的7%、3.6%、2.9%,其比例约为6:3:2。大约占整个语料库的7%(100万单词中出现69971次)。满足齐夫定律中的描述。仅仅前135个字汇就占了Brown语料库的一半。

齐夫定律是一个实验定律,而非理论定律,可以在很多非语言学排名中被观察到,例如不同国家中城市的数量、公司的规模、收入排名等。但它的起因是一个争论的焦点。齐夫定律很容易用点阵图观察,坐标分别为排名和频率的自然对数(log)。比如,“the”用上述表述可以描述为x = log(1), y = log(69971)的点。如果所有的点接近一条直线,那么它就遵循齐夫定律。

主要:

次要:

相关

  • BLEACH《死神》(日语:BLEACH),是日本漫画家久保带人创作的漫画作品,于《周刊少年Jump》连载,自2001年36·37合并号起至2016年37号结束。改编动画版从2004年10月5日起于东京电视台播放。
  • 旧体系:新体系:李属(学名:Prunus),又名樱桃属、桃属、梅属、樱属、杏属,是蔷薇科的一个属。包括李子、樱桃、桃、杏、扁桃、和梅。传统上被放在蔷薇科作为一个亚科,李亚科(或桃亚科),但
  • 克拉伦斯·托马斯克拉伦斯·托马斯(Clarence Thomas,1948年6月23日-),美国法学家。自1991年以来担任美国最高法院大法官,他是美国最高法院继瑟古德·马歇尔后第二位非裔美国人大法官,也是第一个于二
  • 锌指锌指(英语:Zinc finger),又称锌手指,是一种小的蛋白质结构模体,其特征在于配合一个或多个锌离子(Zn2+)以稳定折叠。最初用来描述非洲爪蟾卵母细胞转录因子IIIA假说结构的手指状外观,
  • 死的赞美 (电影)《死的赞美》(韩语:사의 찬미,英语:),为1991年韩国剧情电影,由韩国著名导演金镐善(朝鲜语:김호선)执导,极东Screen出品、制作及发行,本片讲述朝鲜最早的公费留学生尹心悳和她的恋人、天
  • 肌力与体能训练力量和体能训练(Strength and conditioning coach)是健身和体能训练专家使用的一种训练方法,以提升运动员的体能。通过将力量训练和有氧训练相结合以及多种其他方法来实现。专
  • 阿尔贝托·莫拉维亚阿尔贝托·莫拉维亚(Alberto Moravia,1907年11月28日-1990年9月26日),原名Alberto Pincherle,是20世纪意大利著名小说家。阿尔贝托·莫拉维亚生于罗马的一个中产阶级家庭,莫拉维亚
  • 松涛松涛(日语:松濤/しょうとう  */?)是东京都涩谷区的一个町。有一丁目和二丁目。是东京知名的高级住宅区。松涛位于涩谷区的西南部,町内大多是住宅地,是东京都中心有名的高级住宅
  • 利率掉期交易利率掉期交易(interest rate swap)是掉期交易最常见的一种。利率掉期交易合约首先确定一个名义本金(Notional Principal) ,然后需要相反的两方。在合约时间段中,其中一方同意定期
  • 费希尔信息数理统计学中,费希尔信息(英语:Fisher Information;有时称作 information),通常记作 I