熵率

✍ dations ◷ 2025-10-09 01:09:25 #信息论,熵,马尔可夫模型

在概率的数学理论中,非正式地说,一个随机过程的熵率或信源信息率是在一个随机过程的平均信息的时间密度。对于一个索引可数的随机过程,熵率 Η() 是 个 过程作为成员的联合熵,在 趋向无穷时的极限:

前提是该极限存在。另一种相关量为:

对于强平稳随机过程, H ( X ) = H ( X ) {\displaystyle \mathrm {H} (X)=\mathrm {H} '(X)} 的马尔可夫链 ,Η() 由下式给出:

其中 是该链的平稳分布。

此定义的一个简单结果是,一个独立同分布的随机过程的熵率与该过程中的任何个别成员的熵相同。

相关

  • 扫描电化学扫描电化学显微镜(缩写SECM)基于电化学原理工作,可测量微区内物质氧化或还原所给出的电化学电流。利用驱动非常小的电极(探针)在靠近样品处进行扫描,样品可以是导体、绝缘体或半导
  • 圆周率N ⊆ Z ⊆ Q ⊆ R ⊆
  • IrOsub2/sub二氧化铱化学式为IrO2,是唯一明确知道其特性的铱氧化物,其晶格为金红石TiO2结构,其中有六配位的铱及三配位的氧。二氧化铱和其他稀有金属的氧化物可用在工业电解的阳极电极,以及
  • 赛洛西宾赛洛西宾(Psilocybin (/ˌsɪləˈsaɪbɪn/ SIL-ə-SY-bin)是由超过两百种蘑菇(合称迷幻蘑菇,其中主要是是Psilocybe属的成员,如P. azurescens , P. semilanceata和P. cyanescens
  • 比勒费尔德比勒费尔德(德语:Bielefeld,德语发音:.mw-parser-output .IPA{font-family:"Charis SIL","Doulos SIL","Linux Libertine","Segoe UI","Lucida Sans Unicode","Code2000","Genti
  • 吉威蒂诺圭·佩修吉威蒂诺圭·帕卡娃库克·佩修(英语:Keewaydinoquay Pakawakuk Peschel,1919年-1999年7月21日),学者、民族植物学家、草药医师、女巫医、教师与作家。阿尼士纳阿比族鹤氏族的长老
  • 美国航空母舰本列表收录了美国海军己退役或现役中的航空母舰,包括船级属于CV、CVA、CVB、CVL或CVN的全部舰只。编号在CVA-58之后的都属于超级航空母舰(排水量超过75,000吨),CVN-65和CVN-68以
  • 堪萨斯领地堪萨斯领地(英语:Territory of Kansas)是美国历史上的一个合并建制领土,存在于1854年5月30日至1861年1月29日之间,之后升格为美国第34个州堪萨斯州。堪萨斯领地的范围包括了现在
  • 美国无线电视网列表纵观美国传媒历史,在绝大部分时间里,美国本土只拥有三到四家主要的全国级商业无线电视网。例如,在1946年到1956年期间是美国广播公司、哥伦比亚广播公司、国家广播公司和杜蒙特
  • 天主教基尔莫尔教区天主教基尔莫尔教区(拉丁语:Dioecesis Kilmorensis;爱尔兰语:Deoise An Chill Mhór)是罗马天主教在爱尔兰的一个教区,属阿马总教区。教区管辖卡文郡大部分地区,弗马纳郡、斯莱戈郡