偏差信息量准则

✍ dations ◷ 2025-11-06 12:18:01 #贝叶斯统计,回归分析

偏差信息量准则(英语:deviance information criterion,DIC)是等级模型化的赤池信息量准则(AIC),被广泛应用于由马尔可夫链蒙特卡洛(MCMC)模拟出的后验分布的贝叶斯模型选择问题。和赤池信息量准则一样,偏差信息量准则是随样本容量增加的渐近近似,只应用于后验分布呈多元正态分布的情况。


定义偏差(deviance)为 D ( θ ) = 2 log ( p ( y | θ ) ) + C {\displaystyle D(\theta )=-2\log(p(y|\theta ))+C} ,其中 y {\displaystyle y} 为数据, θ {\displaystyle \theta } 是模型中的未知参量, p ( y | θ ) {\displaystyle p(y|\theta )} 是似然函数, C {\displaystyle C} 是常量。

有两种计算模型参数的有效数量 p D {\displaystyle p_{D}} 的方法。一种是 p D = D ¯ D ( θ ¯ ) {\displaystyle p_{D}={\bar {D}}-D({\bar {\theta }})} ,其中 θ ¯ {\displaystyle {\bar {\theta }}} θ {\displaystyle \theta } 的期望(Spiegelhalter 等人 2002,p.587)。第二种是 p D = p V = 1 2 var ^ ( D ( θ ) ) {\displaystyle p_{D}=p_{V}={\frac {1}{2}}{\widehat {\operatorname {var} }}\left(D(\theta )\right)} (Gelman 等人 2004,p.182)。有效数量 p D {\displaystyle p_{D}} 越大,模型的参数就越多,模型就越容易拟合数据,但也需要更小的偏差。

偏差信息量准则 D I C {\displaystyle {\mathit {DIC}}} 被定义为

或等效于

从第二种定义更能看出它和赤池信息量准则的联系。

一般而言,偏差信息量准则 D I C {\displaystyle {\mathit {DIC}}} 的值越小,模型越好。这一准则的优点是它很容易从马尔可夫链蒙特卡洛(MCMC)模拟产生的样本中计算出来。


相关

  • 强电解质电解质(英语:electrolyte)是指在水溶液或熔融状态可以产生自由离子而导电的化合物。通常指在溶液中导电的物质,而固态可导电的物质不算电解质。这包括大多数可溶性盐、酸和碱。
  • 精氨基琥珀酸尿症精氨基琥珀酸尿症是一种遗传性疾病,使氨积聚在血液内。由于氨是有毒的,尤其对神经系统造成破坏,精氨基琥珀酸尿症在出生数天便会发现。患有精氨基琥珀酸尿症的初生婴儿会昏昏欲
  • 高脯氨酸血症高脯氨酸血症是一种遗传病,其会导致血浆脯氨酸水平升高。同时尿脯氨酸、羟脯氨酸、甘氨酸亦会增加其排泄量。此遗传病若与伴侣各携带同一缺陷基因,下一代罹病的几率不分性别皆
  • 翠玉白菜翠玉白菜一般是指台北国立故宫博物院所珍藏的玉器雕刻,长18.7公分,宽9.1公分,厚5.07公分,利用翡翠天然的色泽雕出白菜的形状。近年来因为知名度很高,与国宝的毛公鼎和人气高的重
  • 近地天体近地天体 (near-Earth object, NEO)为太阳系内其轨道接近地球的天体。所有近地天体的轨道近日点都小于1.3天文单位,它们包括数以千计的近地小行星、接近的彗星、和大到在撞击到
  • 66号州际公路66号州际公路(英语:Interstate 66)是一条东西方向的州际公路。该公路连接了华盛顿哥伦比亚特区和弗吉尼亚州弗雷德里克县,全长76.38英里。
  • 冬季奥林匹克运动会跳台滑雪比赛跳台滑雪在1924年奥运会成为正式比赛项目。 维基共享资源中与冬季奥林匹克运动会跳台滑雪比赛相关的分类
  • 各国天主教会各国天主教会列举世界各国家与地区的天主教会概况。本条目大多数数据来自《CIA世界概况》,或皮尤研究中心的调查。根据《CIA世界概况》和皮尤研究中心的数据,天主教徒数量最多
  • 圣伊格内修斯 (蒙大拿州)圣伊格内修斯(英语:St. Ignatius),是美国西北部蒙大拿州的一座城镇。根据2010年美国人口普查,该城镇的人口为842人,在蒙大拿州排行第61。使用北美山区时区(UTC-7,夏季为UTC-6)作为标
  • 汉斯-保罗·博克纳汉斯-保罗·博克纳(德语:Hans-Paul Bürkner, 1952年-)是一位德国企业家。是波士顿咨询公司首位欧洲籍董事长。1952年出生于德国下萨克森弗里斯兰县,先后获得波鸿鲁尔大学学士学