最大后验概率估计

✍ dations ◷ 2025-04-04 11:15:00 #最大后验概率估计
在贝叶斯统计学中,“最大后验概率估计”是后验概率分布的众数。利用最大后验概率估计可以获得对实验数据中无法直接观察到的量的点估计。它与最大似然估计中的经典方法有密切关系,但是它使用了一个增广的优化目标,进一步考虑了被估计量的先验概率分布。所以最大后验概率估计可以看作是规则化(英语:regularization (mathematics))的最大似然估计。假设我们需要根据观察数据 x {displaystyle x} 估计没有观察到的总体参数 θ {displaystyle theta } ,让 f {displaystyle f} 作为 x {displaystyle x} 的采样分布,这样 f ( x | θ ) {displaystyle f(x|theta )} 就是总体参数为 θ {displaystyle theta } 时 x {displaystyle x} 的概率。函数即为似然函数,其估计就是 θ {displaystyle theta } 的最大似然估计。假设 θ {displaystyle theta } 存在一个先验分布 g {displaystyle g} ,这就允许我们将 θ {displaystyle theta } 作为 贝叶斯统计中的随机变量,这样 θ {displaystyle theta } 的后验分布就是:其中 Θ {displaystyle Theta } 是 g {displaystyle g} 的domain,这是贝叶斯定理的直接应用。最后验估计方法于是估计 θ {displaystyle theta } 为这个随机变量的后验分布的众数:后验分布的分母与 θ {displaystyle theta } 无关,所以在优化过程中不起作用。注意当先验 g {displaystyle g} 是常数函数时最大后验估计与最大似然估计重合。最大后验估计可以用以下几种方法计算:尽管最大后验估计与贝叶斯统计共享先验分布的使用,通常并不认为它是一种贝叶斯方法,这是因为最大后验估计是点估计,然而贝叶斯方法的特点是使用这些分布来总结数据、得到推论。贝叶斯方法试图算出后验均值或者中值以及posterior interval,而不是后验模。尤其是当后验分布没有一个简单的解析形式的时候更是这样:在这种情况下,后验分布可以使用 Markov chain Monte Carlo 技术来模拟,但是找到它的模的优化是很困难或者是不可能的。

相关

  • 间质性肺病间质性肺病(Interstitial Lung Disease(ILD),又称为弥漫性肺病 Diffuse Parenchymal Lung Disease(DPLD))是一群主要侵犯肺泡上皮细胞,肺微血管内皮细胞、基底膜以及肺内血管及淋巴
  • 黄长烨黄长烨(韩语:황장엽,1922年2月17日-2010年10月10日),祖籍咸镜南道,生于平安南道江东郡(现已并入平壤),是朝鲜民主主义人民共和国的思想家,以其对主体思想的理论化而著名。曾任朝鲜最高
  • 量词量词(英语:measure word),学术名称分类词(classifier),是一种存在于某些语言中的词语或语素,用来区分由可数名词指代的不同事物。在存在分类词的语言中,分类词常常用于名词被计数或者
  • 海伦·陶西格海伦·布鲁克·陶西格(英语:Helen Brooke Taussig,1898年5月24日-1986年5月20日),美国女性心脏病学家,小儿心脏病学的创始人之一,为布莱洛克-陶西格分流术的提出者。陶西格出生于美国
  • 达尔文学说达尔文主义是与生物演化有关的一系列运动和概念,其中也包含与查尔斯·达尔文无关的思想。随着时间的推移,“达尔文主义”的含义已经发生了变化,这取决于谁在使用这个词语。在美
  • 肋间肌肋间肌即连接相邻两肋骨骨弓的肌肉。在呼吸过程中,每对肋骨间的肋间肌收缩,使肋骨向外并向上摇动。肋间肌与横膈一起运作,以将空气吸入肺中。如果做激烈的运动,则颈部和腹部的肌
  • 车臣共和国车臣共和国(俄语:Чече́нская Респу́блика,罗马化:Chechenskaya Respublika;车臣语:Нохчийн Республика,罗马化:Noxçiyn Respublika)是俄罗斯
  • 拼写检查拼写检查,又叫拼字检查,是对字词的拼写进行检查的功能,能够在一篇文档中标记可能拼写错误的词。拼写检查可以是一个独立的应用程序,也可以更大的应用程序的一部分,如文字处理器、
  • 甜薯番薯(学名:Ipomoea batatas,又名地瓜、甘薯、红薯、红苕、白薯,中国农业部系统称之为甘薯,中国食品工业称之为红薯)为旋花科番薯属的一种,是常见的多年生双子叶植物,草本,其蔓细长,茎
  • 曼尼希反应曼尼希反应(Mannich反应,简称曼氏反应),也称作胺甲基化反应,是含有活泼氢的化合物(通常为羰基化合物)与甲醛和二级胺或氨缩合,生成β-氨基(羰基)化合物的有机化学反应。一般醛亚胺与α