齐夫定律

✍ dations ◷ 2025-11-20 10:44:44 #离散分布,计算语言学,幂定律,统计学定律,实证定律,概率分布尾,计量语言学,书目计量学,经验定律

齐夫定律(英语:Zipf's law,IPA/ˈzɪf/)是由哈佛大学的语言学家乔治·金斯利·齐夫(George Kingsley Zipf)于1949年发表的实验定律。它可以表述为:在自然语言的语料库里,一个单词出现的频率与它在频率表里的排名成反比。所以,频率最高的单词出现的频率大约是出现频率第二位的单词的2倍,而出现频率第二位的单词则是出现频率第四位的单词的2倍。这个定律被作为任何与幂定律概率分布有关的事物的参考。

最简单的齐夫定律的例子是“1/ function”。给出一组齐夫分布的频率,按照从最常见到非常见排列,第二常见的频率是最常见频率的出现次数的½,第三常见的频率是最常见的频率的1/3,第n常见的频率是最常见频率出现次数的1/n。然而,这并不精确,因为所有的项必须出现一个整数次数,一个单词不可能出现2.5次。

在布朗语料库(英语:Brown Corpus)中,“the”、“of”、“and”是出现频率最前的三个单词,其出现的频数分别为69971次、36411次、28852次,大约占整个语料库100万个单词中的7%、3.6%、2.9%,其比例约为6:3:2。大约占整个语料库的7%(100万单词中出现69971次)。满足齐夫定律中的描述。仅仅前135个字汇就占了Brown语料库的一半。

齐夫定律是一个实验定律,而非理论定律,可以在很多非语言学排名中被观察到,例如不同国家中城市的数量、公司的规模、收入排名等。但它的起因是一个争论的焦点。齐夫定律很容易用点阵图观察,坐标分别为排名和频率的自然对数(log)。比如,“the”用上述表述可以描述为x = log(1), y = log(69971)的点。如果所有的点接近一条直线,那么它就遵循齐夫定律。

主要:

次要:

相关

  • 方言 §“方言”和“语言”的界定方言指的是一个某种语言的变体,但有时也可以指地方上使用的语言。然而,值得注意的是,在对所谓的“语言”和“方言”进行定义时,无论是采用社会语言学者“相互理解性”的判别标准
  • 核医学放射性药物列表本表罗列出核医学放射性药物。一些放射性同位素¤在应用时采用的是离子形式或惰性形式,并没有依附于某种药物;这张列表之中也收录有此类的核医学放射性药物。在这张列表之中,每
  • 天体天体力学是天文学的一个分支,涉及天体的运动和万有引力的作用,是应用物理学,特别是牛顿力学,研究天体的力学运动和形状。研究对象是太阳系内天体与成员不多的恒星系统。以牛顿、
  • 复古未来主义复古未来主义(英语:Retro-futurism)是指当代艺术中对早期的未来主义设计风格的模仿。该设计风格将复古风格(英语:Retro style)和具有科技色彩的未来主义风格相结合,通常反映了早期
  • 1402年重要事件及趋势重要人物
  • 美国疾病管制与预防中心美国疾病控制与预防中心(英语:Centers for Disease Control and Prevention,缩写为CDC)是美国卫生与公众服务部所属的一个机构,总部设在乔治亚州亚特兰大。作为美国联邦政府行政
  • 希腊内战希腊王国临时民主政府(英语:Provisional Democratic Government)马其顿民族解放阵线(英语:National Liberation Front (Macedonia))希腊国民军(1945年8月16日至1951年12月22日):15,26
  • 李樟煜李樟煜(1988年8月12日-),浙江省临安市人,患有先天性脑瘫,中国残疾人自行车运动员。2008年4月进入浙江省残疾人自行车队。
  • 哈拉尔德·罗泽哈拉尔德·罗泽(德语:Harald Rose,1935年2月14日-),生于不来梅,德国物理学家。1964年于达姆施塔特工业大学取得理论电子光学物理硕士学位。1976年到1980年任纽约州卫生部门的首席研
  • 陈美陈美(英文名:Vanessa-Mae Vanakorn Nicholson,1978年10月27日-),华裔小提琴演奏家,兼善古典音乐及流行音乐,亦为滑雪运动员。陈美是一位新加坡出生的泰中混血儿,她的生父是泰国人,在旅