布隆过滤器

✍ dations ◷ 2024-09-20 16:37:47 #函数,散列

布隆过滤器(英语:Bloom Filter)是1970年由布隆提出的。它实际上是一个很长的二进制向量和一系列随机映射函数。布隆过滤器可以用于检索一个元素是否在一个集合中。它的优点是空间效率和查询时间都远远超过一般的算法,缺点是有一定的误识别率和删除困难。

如果想判断一个元素是不是在一个集合里,一般想到的是将集合中所有元素保存起来,然后通过比较确定。链表、树、散列表(又叫哈希表,Hash table)等等数据结构都是这种思路。但是随着集合中元素的增加,我们需要的存储空间越来越大。同时检索速度也越来越慢,上述三种结构的检索时间复杂度分别为 O ( n ) , O ( log n ) , O ( 1 ) {\displaystyle O(n),O(\log n),O(1)}

布隆过滤器的原理是,当一个元素被加入集合时,通过K个散列函数将这个元素映射成一个位数组中的K个点,把它们置为1。检索时,我们只要看看这些点是不是都是1就(大约)知道集合中有没有它了:如果这些点有任何一个0,则被检元素一定不在;如果都是1,则被检元素很可能在。这就是布隆过滤器的基本思想。

相比于其它的数据结构,布隆过滤器在空间和时间方面都有巨大的优势。布隆过滤器存储空间和插入/查询时间都是常数( O ( k ) {\displaystyle O(k)} )。另外,散列函数相互之间没有关系,方便由硬件并行实现。布隆过滤器不需要存储元素本身,在某些对保密要求非常严格的场合有优势。

布隆过滤器可以表示全集,其它任何数据结构都不能;

k {\displaystyle k} m {\displaystyle m} 相同,使用同一组散列函数的两个布隆过滤器的交并运算可以使用位操作进行。

但是布隆过滤器的缺点和优点一样明显。误算率是其中之一。随着存入的元素数量增加,误算率随之增加。但是如果元素数量太少,则使用散列表足矣。

另外,一般情况下不能从布隆过滤器中删除元素。我们很容易想到把位数组变成整数数组,每插入一个元素相应的计数器加1, 这样删除元素时将计数器减掉就可以了。然而要保证安全地删除元素并非如此简单。首先我们必须保证删除的元素的确在布隆过滤器里面。这一点单凭这个过滤器是无法保证的。另外计数器回绕也会造成问题。

在降低误算率方面,有不少工作,使得出现了很多布隆过滤器的变种。

相关

  • 弟,汉语口语又称弟弟或阿弟,其中粤语称细佬,是一种亲属关系的称谓,指的是二等亲中比自己年纪小的男性同辈,而“弟”也可以用来指称家族内年纪比自己小的男性同辈。此外在古代时,弟
  • 吉萨金字塔群坐标:29°58′43.41″N 31°8′5.06″E / 29.9787250°N 31.1347389°E / 29.9787250; 31.1347389吉萨金字塔群(阿拉伯语:أهرام الجيزة‎)是指一大片位在埃及开罗郊
  • 微电极微电极(microelectrode)是一种非常小的电极,被使用在电生理学中来记录神经信号或是神经组织的电刺激(英语:Functional_electrical_stimulation)。起初是使用玻璃吸量管微电极,后来
  • 清廷清朝政府,或称清政府、清廷,是指大清的治权机构,始于后金政权,长达296年,至1912年宣统帝退位后终结。清政府末代总理为袁世凯。清朝政府最初的行政架构始设于后金皇太极时期,天聪
  • 职场欺凌职场欺凌,又称职场暴力,泛指在工作场所里,个人或团体对于同事或是下属进行不合理的欺凌行为。包含言语、非言语、身体、心理上的虐待或羞辱。这种形式的攻击行为不同于在学校里
  • 窦 (动物构造)窦(英文:Sinus)指的是器官或组织的囊或腔室。窦可以是天生的也可以是后天由于组织受损而偶然生成的。例如鼻窦就是窦的一种。鼻窦位于人的头颅,在头骨之间、鼻腔周围的颅骨与脸
  • 神木村坐标:23°31′41″N 120°51′25″E / 23.528038°N 120.856892°E / 23.528038; 120.856892神木村,位于台湾南投县信义乡西南角,西部及南部隔阿里山山脉与嘉义县为界,位处于阿
  • 樊迪民樊迪民(1894年-1984年),生于中国浙江杭州,越剧编剧,记者。他是越剧史上第一位专职编剧,第一个越剧刊物《越讴》的创办者。1933年,樊迪民担任《大公报》记者。1938年,被著名越剧演员姚
  • 马耳他参议院马耳他参议院 (马耳他语:Senat),是一个曾经存在过的机构,他是1921年至1933年马耳他议院中的上院。《埃默里-米尔纳宪法》在1921年颁布,并创建一套两院系统,即拥有32席位的众议院
  • 熊童子熊童子 ,(学名:Cotyledon tomentosa) ,又称熊掌,原产于非洲,有大量笨重的卵形模糊绿叶与著名的“牙齿”所以有了熊掌的名称。