布隆过滤器

✍ dations ◷ 2025-11-14 11:43:06 #函数,散列

布隆过滤器(英语:Bloom Filter)是1970年由布隆提出的。它实际上是一个很长的二进制向量和一系列随机映射函数。布隆过滤器可以用于检索一个元素是否在一个集合中。它的优点是空间效率和查询时间都远远超过一般的算法,缺点是有一定的误识别率和删除困难。

如果想判断一个元素是不是在一个集合里,一般想到的是将集合中所有元素保存起来,然后通过比较确定。链表、树、散列表(又叫哈希表,Hash table)等等数据结构都是这种思路。但是随着集合中元素的增加,我们需要的存储空间越来越大。同时检索速度也越来越慢,上述三种结构的检索时间复杂度分别为 O ( n ) , O ( log n ) , O ( 1 ) {\displaystyle O(n),O(\log n),O(1)}

布隆过滤器的原理是,当一个元素被加入集合时,通过K个散列函数将这个元素映射成一个位数组中的K个点,把它们置为1。检索时,我们只要看看这些点是不是都是1就(大约)知道集合中有没有它了:如果这些点有任何一个0,则被检元素一定不在;如果都是1,则被检元素很可能在。这就是布隆过滤器的基本思想。

相比于其它的数据结构,布隆过滤器在空间和时间方面都有巨大的优势。布隆过滤器存储空间和插入/查询时间都是常数( O ( k ) {\displaystyle O(k)} )。另外,散列函数相互之间没有关系,方便由硬件并行实现。布隆过滤器不需要存储元素本身,在某些对保密要求非常严格的场合有优势。

布隆过滤器可以表示全集,其它任何数据结构都不能;

k {\displaystyle k} m {\displaystyle m} 相同,使用同一组散列函数的两个布隆过滤器的交并运算可以使用位操作进行。

但是布隆过滤器的缺点和优点一样明显。误算率是其中之一。随着存入的元素数量增加,误算率随之增加。但是如果元素数量太少,则使用散列表足矣。

另外,一般情况下不能从布隆过滤器中删除元素。我们很容易想到把位数组变成整数数组,每插入一个元素相应的计数器加1, 这样删除元素时将计数器减掉就可以了。然而要保证安全地删除元素并非如此简单。首先我们必须保证删除的元素的确在布隆过滤器里面。这一点单凭这个过滤器是无法保证的。另外计数器回绕也会造成问题。

在降低误算率方面,有不少工作,使得出现了很多布隆过滤器的变种。

相关

  • 脉翅目广翅亚目 Megaloptera 蛇蛉亚目 Raphidioptera 蛟蛉亚目 Planipennia脉翅目(学名:Neuroptera)包括草蛉、蚁蛉、长角蛉等,属于完全变态的昆虫。这个目的成虫有两对膜状的的翅膀,前
  • 旧历一月一日正月初一朔,华夏新年首日,即“岁首”、“年节”、“元旦”。华夏历法一般以最接近立春之朔日(月缺之日)为正月初一,日期一般落在大寒至雨水(在西历1月21日至2月20日)之间。立春紧接
  • 储蓄机构管理局储蓄机构管理局(Office of Thrift Supervision,缩写:OTS)是属于美国财政部的一个政府机构,也是联邦储蓄机构(federal savings associations, 有时也称federal thrifts)的主要管理者
  • 察东特别自治区察东特别自治区是1933年至1936年之间日本在中华民国察哈尔省东部扶植的傀儡政权。1933年3月,日军攻占热河省全境,并将热河省并入满洲国,开始了关东军的“内蒙工作”。不久,日军
  • BANZSLBANZSL或英国、澳大利亚和新西兰手语(British, Australian and New Zealand Sign Language)是将英国手语、澳洲手语和新西兰手语作为三种主要方言的语族。原因是其历史都可追
  • 海澄海澄可以指:
  • 美国死刑制度美国目前有31个州和联邦政府及军队有死刑法律,其余的州、海外领地和首都华盛顿特区没有死刑。在这些没有死刑的地区,绝大多数的最高刑罚是“终身监禁、不得假释”。另外,美国对
  • 君士坦丁堡普世牧首普世牧首(希腊语:Οικουμενικός Πατριάρχης;俗称君士坦丁堡牧首)是君士坦丁堡(今伊斯坦布尔)的宗主教,亦被承认为正教会名义上地位最高(英语:Primus inter pare
  • 施派尔的亨利施派尔的亨利(德语:Heinrich von Speyer,或 Heinrich von Worms;英语:Henry of Speyer,970年-989年或992年)是萨利安王朝成员,他是莱茵河法兰克尼亚地区(英语:Rhenish Franconia)沃尔姆
  • 哈罗德·拉斯韦尔哈罗德·德怀特·拉斯韦尔(英语:Harold Dwight Lasswell,1902年-1978年)是1950年代至1970年代美国社会科学的泰斗,是各种学问科技整合运动的主要人物。曾于耶鲁大学学习政治学,并于