熵率

✍ dations ◷ 2025-11-28 06:53:00 #信息论,熵,马尔可夫模型

在概率的数学理论中,非正式地说,一个随机过程的熵率或信源信息率是在一个随机过程的平均信息的时间密度。对于一个索引可数的随机过程,熵率 Η() 是 个 过程作为成员的联合熵,在 趋向无穷时的极限:

前提是该极限存在。另一种相关量为:

对于强平稳随机过程, H ( X ) = H ( X ) {\displaystyle \mathrm {H} (X)=\mathrm {H} '(X)} 的马尔可夫链 ,Η() 由下式给出:

其中 是该链的平稳分布。

此定义的一个简单结果是,一个独立同分布的随机过程的熵率与该过程中的任何个别成员的熵相同。

相关

  • 放射化学放射化学(英语:Radiochemistry)是化学的一个分支,旨在研究那些参与化学反应的物质属于或带有放射性同位素的化学反应的一门学科。放射化学是关于放射性材料的化学;其中,放射性同位
  • 开尔文开尔文(英语:Kelvin)是温度的计量单位。它是国际单位制(SI)的七个基本单位之一,符号为K。以开尔文计量的温度标准称为热力学温标,其零点为绝对零度。在热力学的经典表述中,绝对零度
  • 穆罕默德伊斯兰纪元前53年3月12日 儒略历571年4月24日伊斯兰纪元11年3月12日 儒略历632年6月7日(61岁)穆罕默德(阿拉伯语:محمّد‎ Muḥammad;571年4月24日-632年6月7日),全名是阿布·
  • 1865年林肯遇刺案阴谋论林肯遇刺案(英语:Assassination of Abraham Lincoln),指发生在1865年4月14日晚上,时任美国总统的亚伯拉罕·林肯在位于美国华盛顿的福特剧院与其妻子玛丽观看《我们的美国兄弟》(O
  • 统一7-ELEVEn狮统一7-ELEVEn狮是一支台湾职业棒球队,隶属于中华职棒,由统一棒球队股份有限公司(统一企业)经营,为中华职棒开创至今唯一硕果仅存的元老球队。前身为统一狮。主场为台南市立棒球场
  • 万豪酒店万豪酒店(全称:万豪酒店及度假村,英语:Marriott Hotels & Resorts)是万豪国际旗下的顶级酒店品牌。本品牌酒店总部设于美国马里兰州,曾多次入选福布斯最佳理想工作公司,2009年被时
  • 勒拉赫勒拉赫(Lörrach)是德国巴登-符腾堡州最西南端弗赖堡行政区勒拉赫县的首府,靠近法国和瑞士的边界。其最大的工业为巧克力工厂妙卡。面积为39.43平方千米。2011年人口为48,380人
  • 一里坪干盐湖一里坪干盐湖位于中国青海省西部海西蒙古族藏族自治州境内,地处柴达木盆地中部,西台吉乃尔湖西北。地面海拔2683米,长45公里,宽约8公里,面积360平方公里。湖区气候极度干旱,年均气
  • 艾拉格湖艾拉格湖(蒙古语:Айраг нуур),蒙古语的意思是“马奶酒湖”,是蒙古西部大湖盆地的一个淡水湖,面积143.3.平方公里。此湖透过一条5公里长、200-300米阔的特鲁巴河与北面的
  • 库尔特·海因里希·德布斯达姆施塔特工业大学,1933年学士,1935年硕士,1939年博士; 1967年罗林斯学院法学博士(荣誉) 1969年国家太空名人堂 1967年:太空飞行奖(美国太空航行学会) 1971年:指挥官十字勋章(