统计距离

✍ dations ◷ 2025-08-07 04:19:00 #度量几何,统计分析

在统计学、概率论和信息论中,统计距离量化了两个统计对象之间的距离。统计对象可以是两个随机变量,两个概率分布或样本,或者一个独立样本点和一个点群之间的距离,或者更加广泛的样本点。

统计距离很多情况下不是由度量诱导的,它们不一定是对称的。一些统计距离也被称为统计区别度(statistical divergence)。

各种统计距离常常有许多名称。有时名称的相似性容易引起误解,有时不同作者或不同时期一些术语的意义也不尽相同。常见的有统计偏差(deviation),区分度(discriminant),区别度(divergence),对比函数(contrast function),度量等。信息论中也称为交叉熵(cross entropy),相对熵(relative entropy),discrimination information, information gain等。

给定一个集合 ,,其上的度量距离是一个非负实值函数 : × → R对任意的 中的 , , ,这个函数满足如下条件:

许多统计距离不满足度量距离的要求。不满足正定性的常常被称为伪度量,不满足对称性的通常被称为准度量,不满足三角不等式被称为半度量。只满足上述(1)和(2)条件的统计距离被称为区别度(divergence)。

f-区别度:KL区别度(相对熵), Hellinger区别度,全变差距离;

仁义熵;

延森-香浓区别度。

相关

  • 杓状软骨肌突杓状软骨肌突(muscular process of arytenoid cartilage)为杓状软骨基部的横向角部,且呈现短、圆形,及突出的结构;它向后以及向外突出,称为肌突 (muscular process);肌突伸入到后环
  • 郑光美郑光美(1932年11月30日-),中国动物学和鸟类生态学家。生于黑龙江哈尔滨,原籍北京。1954年毕业于北京师范大学生物学系,1958年东北师范大学动物生态研究生毕业。现任北京师范大学生
  • 戚林八音《戚林八音》(平话字:.mw-parser-output .sans-serif{font-family:-apple-system,BlinkMacSystemFont,"Segoe UI",Roboto,Lato,"Helvetica Neue",Helvetica,Arial,sans-serif}
  • 锥台在几何学中,锥台又称平截头体,指的是圆锥或棱锥被两个平行平面所截后,位于两个平行平面之间的立体。根据所截的是圆锥还是棱锥,可分为圆台与棱台。棱台或圆台的体积是原立体图形
  • 阿克苏姆帝国阿克苏姆(Kingdom of Aksum、መንግስቲ ኣኽሱም)是公元前或公元初在东北非洲的国家,首都为阿克苏姆城(今属埃塞俄比亚的提格雷省)。公元1世纪,一位古希腊商人写的《红海环航记》
  • 安德烈·科斯塔安德烈·科斯塔(意大利语:Andrea Costa;1986年2月1日-)是一位意大利足球运动员。在场上的位置是左后卫、中后卫和左边锋。他现在效力于意大利足球丙级联赛球队Reggio Audace。
  • 左偏树左偏树(英语:leftist tree或leftist heap),也可称为左偏堆、左倾堆,是计算机科学中的一种树,是一种优先队列实现方式,属于可并堆,在信息学中十分常见,在统计问题、最值问题、模拟问题
  • 刘锦藻刘锦藻(1862年-1934年),原名安江,字澂如,号橙墅,晚号坚匏盦。浙江省湖州府乌程县南浔镇人。晚清政治人物,近代实业家。生于富户之家,其父刘镛乃南浔首富。于光绪二十年(1894年)甲午恩科
  • 小司马小司马,是中国古代官职,夏官的属官,为大司马的副职,掌戎政。(《周礼·夏官·小司马》:“小司马之职掌,凡小祭祀、会同、飨射、师田、丧纪,掌其事如大司马之法。”)。北周仿《周礼》设
  • 认证加密认证加密(英语:Authenticated encryption,AE)和带有关联数据的认证加密(authenticated encryption with associated data,AEAD,AE的变种)是一种能够同时保证数据的保密性、 完整性和