随机博弈

✍ dations ◷ 2025-03-07 11:07:32 #随机博弈

随机博弈(英语:stochastic game),或称随机赛局、随机对局,在博弈论中是一类由一个或多个参与者所进行的、具有状态概率转移的动态博弈,由劳埃德·夏普利(Lloyd Shapley)于20世纪50年代初期提出。

这类博弈由一系列阶段组成。在博弈中每一阶段的起始,博弈处于某种特定状态。每一参与者选择某种行动,然后会获得取决于当前状态和所选择行动的收益。之后,博弈发展到下一阶段,处于一个新的随机状态,这一随机状态的分布取决于先前状态和各位参与者选择的行动。在新状态中重复上述过程,然后博弈继续进行有限或无限个数的阶段。一个参与者得到的总收益常用各阶段收益的贴现和,或是各阶段收益平均值的下极限来计算。

随机博弈的组成部分有:有限参与者集 I {\displaystyle I} ;状态空间 M {\displaystyle M} (可以是有限集,也可以是可测空间 ( M , A ) {\displaystyle (M,{\mathcal {A}})} );对于每一参与者 i I {\displaystyle i\in I} ,存在行动集 S i {\displaystyle S^{i}\,} (可以是有限集,也可以是可测空间 ( S i , S i ) {\displaystyle (S^{i},{\mathcal {S}}^{i})} ); P {\displaystyle P} M × S {\displaystyle M\times S} M {\displaystyle M} 的转移概率,其中 S = × i I S i {\displaystyle S=\times _{i\in I}S^{i}} 是行动组合, P ( A m , s ) {\displaystyle P(A\mid m,s)} 是下一状态处于 A {\displaystyle A} 中的概率,而 A {\displaystyle A} 给定了当前状态 m {\displaystyle m} 和当前行动组合 s {\displaystyle s} ;从 M × S {\displaystyle M\times S} R I {\displaystyle R^{I}\,} 的收益函数 g {\displaystyle g} ,其中 g {\displaystyle g} 的第 i {\displaystyle i} 个坐标 g i {\displaystyle g^{i}\,} 是参与者 i {\displaystyle i} 的收益,而 g i {\displaystyle g^{i}\,} 是状态 m {\displaystyle m} 和行动组合 s {\displaystyle s} 的函数。

博弈以某个初始状态 m 1 {\displaystyle m_{1}} 开始。在阶段 t {\displaystyle t} 中,参与者最先观测到 m t {\displaystyle m_{t}} ,同时选择行动 s t i S i {\displaystyle s_{t}^{i}\in S^{i}} ,然后观测到行动组合 s t = ( s t i ) i {\displaystyle s_{t}=(s_{t}^{i})_{i}} ,然后以概率 P ( m t , s t ) {\displaystyle P(\cdot \mid m_{t},s_{t})} 自然选择 m t + 1 {\displaystyle m_{t+1}} 。一次随机博弈 m 1 , s 1 , , m t , s t , {\displaystyle m_{1},s_{1},\ldots ,m_{t},s_{t},\ldots } 定义了一个收益流 g 1 , g 2 , {\displaystyle g_{1},g_{2},\ldots } ,其中 g t = g ( m t , s t ) {\displaystyle g_{t}=g(m_{t},s_{t})\,}

下面给出随机博弈的一个例子:

当前有任意个装着球的桶,每个桶中球的数目也是任意的,两位参与者轮流从中取出球,且需要遵守如下规则:

贴现因子为 λ {\displaystyle \lambda } 0 < λ 1 {\displaystyle 0<\lambda \leq 1} )的贴现博弈 Γ λ {\displaystyle \Gamma _{\lambda }} 中,参与者 i {\displaystyle i} 的收益是 λ t = 1 ( 1 λ ) t 1 g t i {\displaystyle \lambda \sum _{t=1}^{\infty }(1-\lambda )^{t-1}g_{t}^{i}} n {\displaystyle n} 阶段博弈中,参与者 i {\displaystyle i} 的收益是 g ¯ n i := 1 n t = 1 n g t i {\displaystyle {\bar {g}}_{n}^{i}:={\frac {1}{n}}\sum _{t=1}^{n}g_{t}^{i}}

若存在有限多个状态和行动的二人零和博弈 Γ n {\displaystyle \Gamma _{n}} (各自是 Γ λ {\displaystyle \Gamma _{\lambda }} )的值为 v n ( m 1 ) {\displaystyle v_{n}(m_{1})} (各自是 v λ ( m 1 ) {\displaystyle v_{\lambda }(m_{1})} ),则 v n ( m 1 ) {\displaystyle v_{n}(m_{1})} n {\displaystyle n} 趋于无穷时收敛到一个极限,且 v λ ( m 1 ) {\displaystyle v_{\lambda }(m_{1})} λ {\displaystyle \lambda } 趋于 0 {\displaystyle 0} 时收敛到相同的极限。这一结论已被杜鲁门·彪利(Truman Bewley)和艾朗·克尔伯格(Elon Kohlberg)于1976年证明。

非贴现博弈 Γ {\displaystyle \Gamma _{\infty }} 中,参与者 i {\displaystyle i} 的收益是各阶段收益平均值的极限。在定义二人零和博弈 Γ {\displaystyle \Gamma _{\infty }} 的值与非零和博弈 Γ {\displaystyle \Gamma _{\infty }} 的均衡收益之前需要注意一些事情:若对于每一 ε > 0 {\displaystyle \varepsilon >0} 都有正整数 N {\displaystyle N} 、参与者1的策略 σ ε {\displaystyle \sigma _{\varepsilon }} 和参与者2的策略 τ ε {\displaystyle \tau _{\varepsilon }} ,二人零和随机博弈 Γ {\displaystyle \Gamma _{\infty }} 的一致值(uniform value) v {\displaystyle v_{\infty }} 存在,这样对于每一 σ {\displaystyle \sigma } τ {\displaystyle \tau } 和每一 n N {\displaystyle n\geq N} ,博弈中由 σ ε {\displaystyle \sigma _{\varepsilon }} τ {\displaystyle \tau } 定义的概率的 g ¯ n i {\displaystyle {\bar {g}}_{n}^{i}} 期望至少为 v ε {\displaystyle v_{\infty }-\varepsilon } ,由 σ {\displaystyle \sigma } τ ε {\displaystyle \tau _{\varepsilon }} 定义的概率的 g ¯ n i {\displaystyle {\bar {g}}_{n}^{i}} 期望至多为 v + ε {\displaystyle v_{\infty }+\varepsilon } 。让·弗朗索瓦·梅顿斯(Jean Francois Mertens)和亚伯拉罕·奈曼(Abraham Neyman)于1981年证明二人零和随机博弈具有一致值。

若参与者数量有限且行动集和状态集有限,则有限阶段随机博弈总有纳什均衡,对于总收益是贴现和的无限多阶段随机博弈也是如此。尼古拉斯·维勒(Nicolas Vieille)已经证明当总收益是各阶段收益平均值的下极限时,所有具有有限状态和行动空间的二人随机博弈都有近似纳什均衡。不过,当参与者多于2名时,随机博弈是否存在这类均衡仍是一个极具挑战性的开放性问题。

随机博弈在经济学、演化生物学和计算机网络中都有应用。事实上,随机博弈是重复博弈这类每一阶段都处于相同状态的博弈的一般化形式。

有关随机博弈的最全面的参考书籍是奈曼和索林编著的文集。菲拉尔和乌瑞兹所著的书籍更为基础,书中提供了马尔可夫决策过程(MDP)和二人随机博弈理论的严密的统一处理方法。他们创造了Competitive MDPs这一术语来概括一人和二人随机博弈。

相关

  • 双相情感障碍躁郁症(英语:bipolar disorder,亦称双相情感障碍、情绪两极症,早期称为躁狂抑郁疾病、manic depression),是一种精神病经历情绪的亢奋期和抑郁期。情绪亢奋期(躁期)可分为“狂躁”或
  • 成长因子生长因子(英文:Growth factor)一词是指天然的蛋白能刺激细胞增殖和细胞分化。生长因子调节细胞的各类活动与功能。生长因子通常充当细胞间的信号分子。生长因子结合到靶细胞
  • 华丽细尾鹩莺壮丽细尾鹩莺(学名:Malurus cyaneus),又名华丽细尾鹩莺,是细尾鹩莺科的一种雀,分布在澳洲东南部。它们是留鸟及地盘性的,且有高度的两性异形:雄雀繁殖时前额、耳底、上背及尾巴呈鲜
  • L-门冬酰胺酶门冬酰胺酶(英语:Asparaginase,EC 3.5.1.1),又名天冬酰胺酶或天门冬酰胺酶,是一种催化天冬酰胺水解成天冬氨酸的酶。在自然界中,一些微生物能产生这种酶。不同类型的门冬酰胺酶被用
  • 引力时间膨胀引力时间膨胀(英语:Gravitational time dilation)是指在宇宙有不同势能的区域会导致时间以不同的速率度过的现象,引力导致的时空扭曲率越大,时间就过得越慢。爱因斯坦最初在自己
  • 受体 (物理学)在固态物理学中,受主是把一些物质参杂在半导体里,而让它变成p型半导体。比方说,当再有四个价电子的硅原子里面参杂只有三个价电子的铝或硼会再硅晶格里形成一个空穴,这些空穴会
  • 环己烯环己烯是六个碳的环烯烃,分子式为C6H10,室温下为无色液体。环己烯可通过环己醇酸催化脱水制得。与链状烯烃类似,环己烯能被高锰酸钾氧化,并与溴水发生加成反应3 C6H10+ 2 KMnO4+
  • 第二学生活动中心坐标:25°00′47″N 121°32′13″E / 25.013172°N 121.536837°E / 25.013172; 121.536837台湾大学第二学生活动中心位于台北市大安区罗斯福路四段,空间主要提供国立台湾大
  • 英属美洲英属美洲(英语:British America)包括大英帝国在美洲1607年至1783年间的殖民地。这些殖民地在十三殖民地于美国独立战争(1775-1783)宣布脱离英国独立前官方名为英属美洲及英属西印
  • M85重机枪根据载具类型而不同,没有固定的瞄准具M85重机枪是一款由美国AAI公司所研制、通用电气所生产,主要为了用于装甲战斗车辆的炮塔以上的车载单管机枪。其研制的目的是藉更为紧凑和