偏差信息量准则

✍ dations ◷ 2025-06-07 17:59:03 #贝叶斯统计,回归分析

偏差信息量准则(英语:deviance information criterion,DIC)是等级模型化的赤池信息量准则(AIC),被广泛应用于由马尔可夫链蒙特卡洛(MCMC)模拟出的后验分布的贝叶斯模型选择问题。和赤池信息量准则一样,偏差信息量准则是随样本容量增加的渐近近似,只应用于后验分布呈多元正态分布的情况。


定义偏差(deviance)为 D ( θ ) = 2 log ( p ( y | θ ) ) + C {\displaystyle D(\theta )=-2\log(p(y|\theta ))+C} ,其中 y {\displaystyle y} 为数据, θ {\displaystyle \theta } 是模型中的未知参量, p ( y | θ ) {\displaystyle p(y|\theta )} 是似然函数, C {\displaystyle C} 是常量。

有两种计算模型参数的有效数量 p D {\displaystyle p_{D}} 的方法。一种是 p D = D ¯ D ( θ ¯ ) {\displaystyle p_{D}={\bar {D}}-D({\bar {\theta }})} ,其中 θ ¯ {\displaystyle {\bar {\theta }}} θ {\displaystyle \theta } 的期望(Spiegelhalter 等人 2002,p.587)。第二种是 p D = p V = 1 2 var ^ ( D ( θ ) ) {\displaystyle p_{D}=p_{V}={\frac {1}{2}}{\widehat {\operatorname {var} }}\left(D(\theta )\right)} (Gelman 等人 2004,p.182)。有效数量 p D {\displaystyle p_{D}} 越大,模型的参数就越多,模型就越容易拟合数据,但也需要更小的偏差。

偏差信息量准则 D I C {\displaystyle {\mathit {DIC}}} 被定义为

或等效于

从第二种定义更能看出它和赤池信息量准则的联系。

一般而言,偏差信息量准则 D I C {\displaystyle {\mathit {DIC}}} 的值越小,模型越好。这一准则的优点是它很容易从马尔可夫链蒙特卡洛(MCMC)模拟产生的样本中计算出来。


相关

  • 威氏钝塘鳢红纹钝塘鳢(学名:Amblyeleotris wheeleri),为辐鳍鱼纲鰕虎鱼目鰕虎鱼科钝塘鳢属的其中一种。本鱼分布于印度太平洋区,包括东非、南非、毛里求斯、留尼汪、马尔代夫、台湾、日本、
  • 公法公法是指规范国家和人民之间关系的法律,特色在于,其规范的是国家一方对人民一方下命式的关系。而在更精确的定义下,我们会说,只要适用法律一方的主体(公权力主体),利用它不对等的“
  • 软颚挤喉音(Velar ejective)是辅音的一种,用于一些口语中。表示此音的国际音标(IPA)是⟨kʼ⟩,其等价的X-SAMPA音标则写作k_>。软颚挤喉音的特征包括:当符号成对出现时,左边的是清音
  • 木卫木星拥有79颗已确认的天然卫星,是太阳系内拥有最大卫星系统的行星。当中最大的4颗,统称伽利略卫星,由伽利略于1610年发现,这是首次(除了月球)发现不是围绕太阳的天体。19世纪末起,
  • 湍流层顶湍流层顶,又称均质层顶,是均质层(英语:homosphere)与非均质层(英语:heterosphere)的分界线。湍流层顶位于中间层附近,大致处在中间层和热层的交汇处。其大致位于海拔100km处。其以下
  • 围攻国会督军团,正式名称是“各省区联合会”,指1916年夏至1918年间中华民国北洋系各省督军组织的松散协调议事团体。督军团是部分省、区军阀为争夺权力、协调利益、对抗中央政府而暂时
  • 半数致死量半数致死量(英语:Median Lethal Dose),简称LD50(即Lethal Dose, 50%),在毒理学中是描述有毒物质或辐射的毒性的常用指标。按照医学主题词表(MeSH)的定义,LD50是指“能杀死一半试验总体
  • 印度的邦和中央直辖区印度的一级行政区包括有28个邦、8个中央直辖区及德里国家首都辖区。28个邦每一个邦都有各自的民选政府,首都辖区与邦处相同的地位,而中央直辖区则由中央政府直接管辖。今日的
  • 定制Android固件列表本条目(清单)收录较为知名的第三方团队/厂商制作并(曾经)经常更新、基于Android的售后固件(定制固件)。智能手机厂商的客制版Android系统(即原厂固件)则不在本条目的收录范围。但要
  • 维克托·瓦西里耶维奇·阿法纳西耶夫维克托·瓦西里耶维奇·阿法纳西耶夫(俄语:Виктор Васильевич Афанасьев,1947年5月17日-2020年2月1日),苏联及俄罗斯军乐家。俄罗斯联邦武装力量军乐团