偏差信息量准则

✍ dations ◷ 2025-07-01 10:23:35 #贝叶斯统计,回归分析

偏差信息量准则(英语:deviance information criterion,DIC)是等级模型化的赤池信息量准则(AIC),被广泛应用于由马尔可夫链蒙特卡洛(MCMC)模拟出的后验分布的贝叶斯模型选择问题。和赤池信息量准则一样,偏差信息量准则是随样本容量增加的渐近近似,只应用于后验分布呈多元正态分布的情况。


定义偏差(deviance)为 D ( θ ) = 2 log ( p ( y | θ ) ) + C {\displaystyle D(\theta )=-2\log(p(y|\theta ))+C} ,其中 y {\displaystyle y} 为数据, θ {\displaystyle \theta } 是模型中的未知参量, p ( y | θ ) {\displaystyle p(y|\theta )} 是似然函数, C {\displaystyle C} 是常量。

有两种计算模型参数的有效数量 p D {\displaystyle p_{D}} 的方法。一种是 p D = D ¯ D ( θ ¯ ) {\displaystyle p_{D}={\bar {D}}-D({\bar {\theta }})} ,其中 θ ¯ {\displaystyle {\bar {\theta }}} θ {\displaystyle \theta } 的期望(Spiegelhalter 等人 2002,p.587)。第二种是 p D = p V = 1 2 var ^ ( D ( θ ) ) {\displaystyle p_{D}=p_{V}={\frac {1}{2}}{\widehat {\operatorname {var} }}\left(D(\theta )\right)} (Gelman 等人 2004,p.182)。有效数量 p D {\displaystyle p_{D}} 越大,模型的参数就越多,模型就越容易拟合数据,但也需要更小的偏差。

偏差信息量准则 D I C {\displaystyle {\mathit {DIC}}} 被定义为

或等效于

从第二种定义更能看出它和赤池信息量准则的联系。

一般而言,偏差信息量准则 D I C {\displaystyle {\mathit {DIC}}} 的值越小,模型越好。这一准则的优点是它很容易从马尔可夫链蒙特卡洛(MCMC)模拟产生的样本中计算出来。


相关

  • 赭曲霉赭曲霉(学名:Aspergillus ochraceus)是属于散囊菌目发菌科曲霉属的一种真菌,可生长在土壤、药材、虫草、蚂蚁、羊粪、野果、霉腐物等基物上。该种分布于中国、荷兰、阿根廷、澳
  • 高雄临港线高雄临港线(又名高雄港线)是从高雄港车站至高雄车站经由前镇车场,由台湾铁路管理局经营的传统铁路货运支线。1900年11月29日随着纵贯线“打狗—台南”段通车,打狗停车场正式开始
  • V03AFA·B·C·D·G·H·QI·J·L·M·N·P·R·S·VATC代码V03(其它各种治疗用药品)是解剖学治疗学及化学分类系统的一个药物分组,这是由世界卫生组织药物统计方法整合中心(The WHO
  • 休闲潜水指以娱乐休闲观光为目的的潜水活动,其最大潜水深度一般不超过水下30米,极限为水下40米。40米以下为技术潜水(英语:Technical diving)范畴。有下列情况者不应进行水下潜水活动:游泳
  • 鱼子酱鱼子酱是用从鱼身上的鱼卵制成的酱,与鹅肝、松露并列“西方三大珍味”。虽然说几乎所有种类的鱼卵都可被做成鱼子酱,但严格来说以鲟鱼的鱼卵制作的才是鱼子酱。最上等的鱼子酱
  • 益母草益母草(学名:Leonurus artemisia),为唇形科益母草属一年生或二年生草本植物。益母草原称“茺蔚”,始载于《神农本草经》“茺蔚子”条下,《本草纲目》云:“此草及子皆充盛密蔚,故名茺
  • 安东尼奥·萨拉查安东尼奥·德·奥利维拉·萨拉查(葡萄牙语:António de Oliveira Salazar;1889年4月28日-1970年7月27日),葡萄牙总理、葡萄牙总统,葡萄牙迄今为止任职时间最长的总理,统治长达36年,实
  • 错失恐惧症错失恐惧症(英语:Fear of missing out,简称:FOMO),也称社群恐慌症等,是指一种由患得患失所产生持续性的焦虑,得上这种症的人总会感到别人在自己不在时经历了什么非常有意义的事情。
  • 世界革命世界革命指的是马克思主义中,以暴力革命推翻世界各国的资本主义的思想。马克思主义理论认为世界革命可以导致世界共产主义(world communism)及之后的无国界共产主义(stateless c
  • 后汉后汉(947年-951年)是五代十国的第四个朝代,同时也是最后一个由沙陀人建立的中原王朝。亦称刘汉。后汉承自后晋,根据五行相生的顺序,后晋的“金”德之后是“水”德,因此后汉以“水”