熵率

✍ dations ◷ 2024-12-23 05:54:02 #信息论,熵,马尔可夫模型

在概率的数学理论中,非正式地说,一个随机过程的熵率或信源信息率是在一个随机过程的平均信息的时间密度。对于一个索引可数的随机过程,熵率 Η() 是 个 过程作为成员的联合熵,在 趋向无穷时的极限:

前提是该极限存在。另一种相关量为:

对于强平稳随机过程, H ( X ) = H ( X ) {\displaystyle \mathrm {H} (X)=\mathrm {H} '(X)} 的马尔可夫链 ,Η() 由下式给出:

其中 是该链的平稳分布。

此定义的一个简单结果是,一个独立同分布的随机过程的熵率与该过程中的任何个别成员的熵相同。

相关

  • 滤过裂隙滤过裂隙(filtration slits),即肾脏的组成肾元之肾小体内的鲍氏囊上之足细胞的"足突"叉合彼此形成"滤过裂隙"(或裂隙孔)、且裂隙极小(约为8 nm),而带有负电荷、大分子以及带阴
  • 专注力专注力是认知神经科学术语,指专心而持续地进行活动,同时忽略外在环境对视觉、听觉及触觉等的干扰之能力。这种能力与记忆力等管控功能息息相关,同样主要由脑额叶的前扣带皮层控
  • 印度河流列表印度河流列表,列举全部或部分流经印度的河流,并依流域的地理位置由东至西排序。支流则由河口至源头排序。
  • 中国公主列表中国公主列表,以下列表列出中国历史有载之公主(皇女)一览:南朝宋末年有公主嫁王亮,但无载其身世。
  • 英国陆军英国陆军(英语:British Army),是英国军队的地上作战部队,它是由苏格兰与英格兰在1707年合并为大不列颠王国时形成的。至2006年,英国陆军的现役部队有80,000人,国土军有24,700人,除国
  • 郑知苏郑知苏(韩语:정지소,1999年9月17日-),韩国女演员。原以本名玄承旻(韩语:현승민)出道,于2019年《寄生虫》启用艺名郑知苏。直到国中一年级为止,她还是花式滑冰选手,在选手时期曾获得过乐
  • 龙刍龙刍,是传说中的一种妖草名,马吃了能日行千里。
  • 我妻绘美我妻绘美(日语:我妻 絵美/あつまま えみ ,本名:田边绘美,结婚前姓:我妻,1983年10月26日-)是三桂(日语:三桂)所属的自由播音员。原中京电视台播音员。出生于宫城县仙台市。毕业于宫城县第
  • 蒙扎的历史蒙扎的历史始于古罗马时代,正式命名为摩迪斯阿(Modicia), 但在蒙扎附近一带地区,考古证物显示有人居住的日期比古罗马更早。公元七世纪左右,蒙扎是伦哥巴度王国(Regno Longobar
  • 建筑结构建筑结构系统(Architectural structure),是建筑学对各种结构形式的称谓,一般而言还包含这些结构形式涵盖或衍生的行为。结构系统在建筑领域的功能,是不同于土木工程或机械工程等