生成模型

✍ dations ◷ 2025-12-04 05:52:15 #生成模型

在概率统计理论中, 生成模型是指能够随机生成观测数据的模型,尤其是在给定某些隐含参数的条件下。它给观测值和标注数据序列指定一个联合概率分布。在机器学习中,生成模型可以用来直接对数据建模(例如根据某个变量的概率密度函数进行数据采样),也可以用来建立变量间的条件概率分布。条件概率分布可以由生成模型根据贝叶斯定理形成。

香农 (1948) 给出了有一个英语双词频率表生成句子的例子。可以生成如“representing and speedily is an good”这种句子。一开始并不能生成正确的英文句子,但随着词频表由双词扩大为三词甚至多词,生成的句子也就慢慢的成型了。

生成模型的定义与判别模型相对应:生成模型是所有变量的全概率模型,而判别模型是在给定观测变量值前提下目标变量条件概率模型。因此生成模型能够用于模拟(即)模型中任意变量的分布情况,而判别模型只能根据观测变量得到目标变量的采样。判别模型不对观测变量的分布建模,因此它不能够表达观测变量与目标变量之间更复杂的关系。因此,生成模型更适用于无监督的任务,如分类和聚类。

典型的生成模型包括:

如果观测数据是由生成模型中采样的,那么最大化数据似然概率是一个常见的方法。但是,大部分统计模型只是近似于分布,如果任务的目标是在已知一部分变量的值的条件下,对另一部分变量的推断,那么可以认为这种模型近似造成了一些对于当前任务来说不必要的假设。在这种情况下,使用判别模型对条件概率函数建模可能更准确,尽管具体的应用细节会最终决定哪种方法更为适用。

相关

  • 马克斯·冯·劳厄马克斯·冯·劳厄(德语:Max von Laue,1879年10月9日-1960年4月24日),德国物理学家,因发现晶体中X射线的衍射现象而获得1914年诺贝尔物理学奖。1879年10月9日,马克斯·劳厄出生于科布
  • 殷秀梅殷秀梅(1956年-),女,汉族,黑龙江鹤岗人,祖籍山东平阴,中国歌唱家,一级演员,全国青联常委、全国妇联执委,中国音乐家协会理事,第十二届全国人民代表大会黑龙江地区代表。1983年毕业于中央
  • 3Q3Q可以指:
  • 爱德华·沃尔特·蒙德爱德华·沃尔特·蒙德(英文:Edward Walter Maunder,1851年4月12日-1928年3月21日),英格兰天文学家,最著名的学术贡献即是他在太阳黑子与太阳磁力周期上的研究中,标示出1645-1715年间
  • 我们结婚吧《我们结婚吧》(英文:Merry Me)是一部台湾偶像剧,由贺军翔、刘喆莹 、周采诗、锺欣愉主演,2006年7月19日起于华视首播。《爱情合约》电视原声带于2006年8月发行。原声带中收录了
  • 格奈乌斯·庞培格奈乌斯·庞培(拉丁语:Gnaeus Pompeius Magnus;全名Gnaeus Pompeius Gnaeī fīlius Sextī nepōs Magnus,前106年-前48年),古罗马政治家和军事家。勇悍善战,凶残嗜杀,于前三头同盟
  • 六约站六约站是深圳地铁3号线的车站,位于龙岗大道近六约建材市场,深坑村东北方向,于2010年12月28日正式启用,为高架站。六约站为地面三层两柱单跨式钢筋混凝土结构,地面一层为设备层,地
  • 段威段威(509年-575年),字杀鬼,南北朝时代军事人物,辽西鲜卑族,段部鲜卑首领段匹䃅的七代孙,北海郡期原县人。段威开始投奔天柱大将军尔朱荣参军,自奉朝请转任征虏将军、内散大夫。段威随
  • 覃远琎覃远琎(1821年-1891年),字玉次,湖南石门县人,土家族,晚清政治、军事人物,学者。咸丰元年(1851年)举人,咸丰三年(1853年)癸丑科进士。咸丰六年(1856年)官陆川县知县。同治间历升浔州知州、广
  • 4minute4Minute(4M)(韩语:포미닛)是韩国娱乐公司Cube娱乐于2009年6月成立的五人女子音乐组合,成员包括南智贤、许嘉允、田祉润、金泫雅、权昭贤。2009年6月18日,以首张单曲《Hot Issue》正式出道。团名的意义即在舞台上的4分钟内展示她们每个人的不同魅力,另外,for (a) Minute也包含了她们希望在每个瞬间都会努力做到最好的意思。粉丝称为“4Nia”,意即“4Nia refers to 4Minute Mania!”。应援色为珍珠紫罗兰色。 2016年6月16日,Cube官方宣布4