熵率

✍ dations ◷ 2025-10-14 21:23:08 #信息论,熵,马尔可夫模型

在概率的数学理论中,非正式地说,一个随机过程的熵率或信源信息率是在一个随机过程的平均信息的时间密度。对于一个索引可数的随机过程,熵率 Η() 是 个 过程作为成员的联合熵,在 趋向无穷时的极限:

前提是该极限存在。另一种相关量为:

对于强平稳随机过程, H ( X ) = H ( X ) {\displaystyle \mathrm {H} (X)=\mathrm {H} '(X)} 的马尔可夫链 ,Η() 由下式给出:

其中 是该链的平稳分布。

此定义的一个简单结果是,一个独立同分布的随机过程的熵率与该过程中的任何个别成员的熵相同。

相关

  • UPSUPS可以指:
  • T7 RNA聚合酶T7 RNA聚合酶(英语:T7 RNA Polymerase)是一种RNA聚合酶,分子量约99kDa。专门催化5'→3'方向的RNA形成过程。T7RNA聚合酶具有高度启动子专一性,且只会转录T7噬菌体中位于T7启动子
  • 霍朗赫布霍朗赫布(英语Horemheb)古埃及新王国时期第十八王朝的末代法老(约公元前1319年—约公元前1292年在位)。他恢复了被阿肯那顿废除的传统。重新以孟斐斯为首都。并摧毁崇拜阿顿的新
  • 九转大肠九转大肠是鲁菜中的济南派名菜,是一道以猪大肠制成的菜肴。“九转大肠”出于清朝光绪初年,由九华楼酒店首创,最初称为“红烧大肠”。制作时先加香料用开水煮至软酥,然后红烧,出勺
  • 2012年美国州长选举|-2012年美国州长选举同时于2012年11月6日在11个州和两个地区举行,为2012年美国大选的一部分。另外,在6月5日亦举行了一次对威斯康辛州州长的罢免选举。除特别说明,否则副州长
  • 恐怖惊魂夜2 监狱岛的童谣《恐怖惊魂夜2 监狱岛的童谣》(日语:かまいたちの夜2 監獄島のわらべ唄,正标题又译“镰鼬之夜2”,副标题也译“监狱岛儿歌”)是Chunsoft开发并于2002年在PlayStation 2首发的视觉
  • 大诰大诰可以指:
  • 梁守槃梁守槃(1916年4月13日-2009年9月5日),福建省福州市人,中国科学院院士,中国著名导弹总体和火箭技术专家,中国导弹与航天技术的重要开拓者之一。中国第一枚液体燃料短程弹道导弹、“
  • 菲利普·B·麦格斯菲利普·B·麦格斯(英文:Philip B. Meggs,1942年5月30日 - 2002年11月24日),图形设计师、教授、设计史学家,《平面设计史》著作者。菲利普·麦格斯著于1983年的《平面设计史》是平
  • 2009年世界运动会柔术比赛2009年世界运动会的柔术比赛由7月21日至7月22日于中山大学体育馆举行。分别为对战以及双人演武两大项。运动舞蹈 | 体操 | 滑轮溜冰 | 合球 | 浮士德球 | 七人制橄榄球 | 壁