概率论中有若干关于随机变量收敛(Convergence of random variables)的定义。研究一列随机变量是否会收敛到某个极限随机变量是概率论中的重要内容,在统计概率和随机过程中都有应用。在更广泛的数学领域中,随机变量的收敛被称为随机收敛,表示一系列本质上随机不可预测的事件所发生的模式可以在样本数量足够大的时候得到合理可靠的预测。各种不同的收敛定义实际上是表示预测时不同的刻画方式。
正如一个数列可能收敛到某个极限量,一列函数可能收敛到某个极限函数一样,随机收敛指的是一系列随机变量趋向于无穷大时,会越来越接近某个固定的极限。这个极限可能是指:
等等。这些不同的极限的定义,可以严格地写成不同的收敛方式的定义。
依概率1收敛又称为几乎处处收敛,其定义接近于函数逐点收敛的定义。事实上,由于随机变量的本质是由样本空间, ) 的时候,依概率1收敛的意义是:
设, ),那么依概率收敛的定义为:
依概率收敛和依概率1收敛的定义有相似之处,但本质上,依概率1收敛是比依概率收敛更“强”的收敛性质。如果一列随机变量依概率1收敛到某个极限,那么它必然也依概率收敛到这个极限,但反之则不然。一个实数上的例子是:设概率空间 趋于无穷大的时候,只要偏离极限函数的不同而不同;而依概率1收敛则要求
的集合固定地缩减至一个概率为0的集合。因此,依概率1收敛要比依概率收敛更为严格。
另一种收敛的定义与测度的积分有关。在积分理论中,如果两个函数
和
满足
,那么这两个函数在关于测度
的平方可积空间中相等。随机变量的平方平均收敛与此相似:如果对平方可积的随机变量序列
,存在随机变量
,使得
,那么就说序列
平方平均收敛到
,记作:
由于
空间是完备的,极限
也一定平方可积。
对于更一般的
空间,也有类似的定义:如果对
空间中的随机变量序列
,存在
中的随机变量
,使得
,那么就说序列
依
收敛到
,记作:
当常数
时,也称为平均收敛。
依分布收敛是最宽松的收敛方式之一。这种收敛不要求查看每个
,只要求序列的分布趋向于某个极限。直觉上,一个随机变量序列
依分布收敛到某个随机变量
,如果:
更严格的定义是探讨随机变量
的累积分布函数
。设有实值的随机变量序列
和某个随机变量
(其累积分布函数为
),如果对
的每个连续点
,都有
,那么就说
依分布收敛到某个随机变量
。记作:
由于依分布收敛只和随机变量的分布相关,所以也可以称一系列随机变量(依分布)收敛于某个分布。设
是极限
的分布,那么依分布收敛也可以记作:
例如一个随机变量序列
依分布收敛到标准正态分布,就可以记作:
各个收敛的定义有强弱之分。一个收敛性强于另一个是指从前者可以推出后者。例如依概率收敛强于依分布收敛,即是说如果一列随机变量依概率收敛到某个极限,那么必定也依分布收敛到这个极限。具体来说,收敛性的强弱关系可以用下图来表示: