偏差信息量准则

✍ dations ◷ 2025-11-16 19:26:14 #贝叶斯统计,回归分析

偏差信息量准则(英语:deviance information criterion,DIC)是等级模型化的赤池信息量准则(AIC),被广泛应用于由马尔可夫链蒙特卡洛(MCMC)模拟出的后验分布的贝叶斯模型选择问题。和赤池信息量准则一样,偏差信息量准则是随样本容量增加的渐近近似,只应用于后验分布呈多元正态分布的情况。


定义偏差(deviance)为 D ( θ ) = 2 log ( p ( y | θ ) ) + C {\displaystyle D(\theta )=-2\log(p(y|\theta ))+C} ,其中 y {\displaystyle y} 为数据, θ {\displaystyle \theta } 是模型中的未知参量, p ( y | θ ) {\displaystyle p(y|\theta )} 是似然函数, C {\displaystyle C} 是常量。

有两种计算模型参数的有效数量 p D {\displaystyle p_{D}} 的方法。一种是 p D = D ¯ D ( θ ¯ ) {\displaystyle p_{D}={\bar {D}}-D({\bar {\theta }})} ,其中 θ ¯ {\displaystyle {\bar {\theta }}} θ {\displaystyle \theta } 的期望(Spiegelhalter 等人 2002,p.587)。第二种是 p D = p V = 1 2 var ^ ( D ( θ ) ) {\displaystyle p_{D}=p_{V}={\frac {1}{2}}{\widehat {\operatorname {var} }}\left(D(\theta )\right)} (Gelman 等人 2004,p.182)。有效数量 p D {\displaystyle p_{D}} 越大,模型的参数就越多,模型就越容易拟合数据,但也需要更小的偏差。

偏差信息量准则 D I C {\displaystyle {\mathit {DIC}}} 被定义为

或等效于

从第二种定义更能看出它和赤池信息量准则的联系。

一般而言,偏差信息量准则 D I C {\displaystyle {\mathit {DIC}}} 的值越小,模型越好。这一准则的优点是它很容易从马尔可夫链蒙特卡洛(MCMC)模拟产生的样本中计算出来。


相关

  • 灵长目灵长目(学名:Primates)是哺乳纲的一个目,在生物分类学上,可以再细分原猴及简鼻亚目(包括人)。灵长目的始祖住在热带雨林的树上,许多灵长目的特征表现了其适应三维立体环境的能力,大部
  • 曹植曹植(192年-232年12月27日),字子建,沛国谯县(今安徽亳州)人,曹操第四子,卞氏嫡出之第三子,三国时期曹魏的著名诗人。“才高八斗”(“八斗之才”)、“七步成诗”等词之语源。其诗歌对后世
  • 打通南北航线打通南北航线,以黎明轮在1968年4月至5月间从广东湛江至山东青岛的航行为标志,中国大陆方面恢复使用本国船只运行南北港口间海运的事件。1949年,随着两岸分治及中华人民共和国政
  • 专家专业人士,通称专家、学者,即职场上的专门行业,指具备专业化知识及技能的职业人士。通常,专业技能须符合科学原理,经过长时间的学习及训练,并有经专业认证的考试获得的合格证书或执
  • 斑蚊属黑斑蚊是伊蚊属(学名:Aedes)昆虫的通称,又称伊蚊、斑蚊或艾迪斯蚊,属于蚊科库蚊亚科,有很多种类分布在世界各地。此类型蚊虫通常活跃于傍晚和清晨时分,其中白线斑蚊及埃及斑蚊是登
  • 古提人库提人是扎格罗斯山脉(现伊朗和伊拉克边界)的游牧民族。他们的祖国常被称为苏美尔,库提人往往被认为是现代库尔德族的先驱。公元前1世纪,库提人就常出现于美索不达米亚低地,之后
  • 泰恩-威尔泰恩-威尔(郡)(英语:Tyne and Wear),英国英格兰东北部的郡,东临北海,有1,095,200人口(2005年),占地540平方公里。在1974年4月1日起成为名誉郡、都市郡。以人口计算,博尔登是第1大的村;桑
  • 巴林经济巴林依照由美国传统基金会及华尔街日报所发表的2006年经济自由度指数拥有中东最自由的经济,并且于世界排名第25。 由于“政府已经寻求经济的多元化,以减少依赖于巴林衰退中的
  • 索尔·阿林斯基索尔·戴维·阿林斯基(Saul David Alinsky,1909年1月30日-1972年6月12日)美国社区组织家和作家,通常被认为是现代社区组织的创始人。以著作《激进者守则(英语:Rules for Radicals)》
  • 株落失能株落失能(英语:Clonal anergy)是一个免疫学名词。描述的是周边淋巴球对于外来物质失去产生免疫反应的能力,而导致耐受性。失能的淋巴球株落将无法对于特定的抗原产生免疫反应,通