生成模型

✍ dations ◷ 2025-04-04 11:13:21 #生成模型

在概率统计理论中, 生成模型是指能够随机生成观测数据的模型,尤其是在给定某些隐含参数的条件下。它给观测值和标注数据序列指定一个联合概率分布。在机器学习中,生成模型可以用来直接对数据建模(例如根据某个变量的概率密度函数进行数据采样),也可以用来建立变量间的条件概率分布。条件概率分布可以由生成模型根据贝叶斯定理形成。

香农 (1948) 给出了有一个英语双词频率表生成句子的例子。可以生成如“representing and speedily is an good”这种句子。一开始并不能生成正确的英文句子,但随着词频表由双词扩大为三词甚至多词,生成的句子也就慢慢的成型了。

生成模型的定义与判别模型相对应:生成模型是所有变量的全概率模型,而判别模型是在给定观测变量值前提下目标变量条件概率模型。因此生成模型能够用于模拟(即)模型中任意变量的分布情况,而判别模型只能根据观测变量得到目标变量的采样。判别模型不对观测变量的分布建模,因此它不能够表达观测变量与目标变量之间更复杂的关系。因此,生成模型更适用于无监督的任务,如分类和聚类。

典型的生成模型包括:

如果观测数据是由生成模型中采样的,那么最大化数据似然概率是一个常见的方法。但是,大部分统计模型只是近似于分布,如果任务的目标是在已知一部分变量的值的条件下,对另一部分变量的推断,那么可以认为这种模型近似造成了一些对于当前任务来说不必要的假设。在这种情况下,使用判别模型对条件概率函数建模可能更准确,尽管具体的应用细节会最终决定哪种方法更为适用。

相关

  • 魏氏智力测验异常心理学 行为遗传学 生物心理学 心理药物学 认知心理学 比较心理学 跨文化心理学 文化心理学 差异心理学(英语:Differential psychology) 发展心理学 演化心理学 实验心理学
  • BBC (消歧义)BBC可以解作:
  • 克洛德·列维-斯特劳斯克劳德·列维-斯特劳斯(Claude Lévi-Strauss,1908年11月28日-2009年10月30日)著名的法国人类学家,与弗雷泽、鲍亚士共同享有“现代人类学之父”美誉。他所建构的结构主义与神话
  • 深陷天堂《深陷天堂》(英语:)是美国创作型歌手布鲁诺·马尔斯的一首歌曲,收录于他的第2张录音室专辑《火星点唱机》中,于2012年10月1日作为专辑的首波主打单曲发行。歌曲由The Smeezingto
  • 东海林太郎东海林太郎(1898年12月11日-1972年10月4日),1936年起从职歌手。一直以来以其直立不动一本正经的演唱方法赢得了日本国民的喜爱,尤其为战前最具代表性的歌手。1898年,出生于秋田县
  • 伊老师与小蟾蜍大历险《伊老师与小蟾蜍大历险》(英语:)是迪士尼第11部经典动画长片。于1949年10月5日上映。
  • 波士顿建筑学院波士顿建筑学院(英语:Boston Architectural College)创建于1889年,前身是执业建筑师俱乐部。如今,波士顿建筑学院下设多个分院,开设有一系列受到评鉴机构认可的建筑及设计领域优质
  • 沈国军沈国军(1962年7月-),浙江奉化人,中国企业家,银泰百货集团董事长兼总裁,持有银泰26.53%,菜鸟网络科技有限公司首席执行官。现北京浙江商会会长。毕业于中南财经大学,获得硕士学位。199
  • 梅德巴赫河坐标:51°10′21.2″N 8°43′30.7″E / 51.172556°N 8.725194°E / 51.172556; 8.725194梅德巴赫河(德语:Medebach),是德国的河流,位于该国西部,处于北莱茵-威斯特法伦州,属于奥尔
  • 泛林集团泛林集团(Lam Research Corporation),台湾称科林研发,或译拉姆研究,是一家美国科技公司,生产、设计、销售半导体产品。该公司由林杰屏 (David K. Lam)成立于1980年,总部位于硅谷。1