生成模型

✍ dations ◷ 2025-10-14 18:29:19 #生成模型

在概率统计理论中, 生成模型是指能够随机生成观测数据的模型,尤其是在给定某些隐含参数的条件下。它给观测值和标注数据序列指定一个联合概率分布。在机器学习中,生成模型可以用来直接对数据建模(例如根据某个变量的概率密度函数进行数据采样),也可以用来建立变量间的条件概率分布。条件概率分布可以由生成模型根据贝叶斯定理形成。

香农 (1948) 给出了有一个英语双词频率表生成句子的例子。可以生成如“representing and speedily is an good”这种句子。一开始并不能生成正确的英文句子,但随着词频表由双词扩大为三词甚至多词,生成的句子也就慢慢的成型了。

生成模型的定义与判别模型相对应:生成模型是所有变量的全概率模型,而判别模型是在给定观测变量值前提下目标变量条件概率模型。因此生成模型能够用于模拟(即)模型中任意变量的分布情况,而判别模型只能根据观测变量得到目标变量的采样。判别模型不对观测变量的分布建模,因此它不能够表达观测变量与目标变量之间更复杂的关系。因此,生成模型更适用于无监督的任务,如分类和聚类。

典型的生成模型包括:

如果观测数据是由生成模型中采样的,那么最大化数据似然概率是一个常见的方法。但是,大部分统计模型只是近似于分布,如果任务的目标是在已知一部分变量的值的条件下,对另一部分变量的推断,那么可以认为这种模型近似造成了一些对于当前任务来说不必要的假设。在这种情况下,使用判别模型对条件概率函数建模可能更准确,尽管具体的应用细节会最终决定哪种方法更为适用。

相关

  • 江苏大学江苏大学是一所位于江苏省镇江市,以工为主、理工医教结合的教学研究型综合性大学,是江苏省人民政府和中国农业部共建高校。江苏大学办学渊源可追溯到1902年,2001年江苏理工大学
  • 罗迪欧大道罗迪欧大道(英语:Rodeo Drive)位于美国加州比华利山(Beverly Hills),全长2英里(3.2千米),北面连接日落大道,是一条以奢侈精品店林立而闻名于世的购物街。在街道纷纷设立精品店后,“罗迪
  • .cu.cu为古巴国家及地区顶级域(ccTLD)的域名。A .ac .ad .ae .af .ag .ai .al .am .ao .aq .ar .as .at .au .aw .ax .az  B .ba .bb .bd .be .bf .bg .bh .bi .bj .bm .bn .
  • 同色小檗同色小檗(学名:)为小檗科小檗属的植物,是中国的特有植物。分布在中国大陆的云南等地,生长于海拔2,300米至3,600米的地区,多生在沟边灌丛中,目前尚未由人工引种栽培。
  • 阿列克谢·雅科夫列维奇·卡普勒阿列克谢·雅科夫列维奇·卡普勒(俄语:Алексей Яковлевич Ка́плер,1904年9月15日-1979年9月11日),苏联电影制片人、编剧、导演、作家。他是苏联著名电影《
  • 松下忠洋松下忠洋(1939年2月9日-2012年9月10日),日本的建设官僚、政治家。共担任五届众议院议员。历任建设省河川局砂防部部长、众议院内阁委员长、内阁府特命担当大臣(金融担当)、国民新
  • 佐伊·达奇佐伊·弗朗西斯·汤普森·达奇(英语:Zoey Francis Thompson Deutch,1994年11月10日-),是一名美国女演员和制片。因在电影《美丽生灵》中饰演爱蜜莉·艾雪(Emily Asher),与《吸血鬼学
  • 汉莎货运航空汉莎货运航空(德语:Lufthansa Cargo)是汉莎航空旗下的一家货运航空子公司,总部设于德国法兰克福。 与大多数航空公司的货运部门不同,汉莎货运航空拥有自己的ICAO代码和呼号,并独立
  • 艾瑞·艾斯特艾瑞·艾斯特(英语:Ari Aster,1987年-)是一名美国男导演和编剧。较知名的作品如短片《The Strange Thing About the Johnsons(英语:The Strange Thing About the Johnsons)》(2011年),
  • 103年台湾原创流行音乐大奖103年台湾原创流行音乐大奖(英语:2014 Taiwan Music Composition and Songwriting Contest),由文化部影视及流行音乐产业局、客家委员会共同主办。延续主题精神“台湾源动力”,持续强调台湾原创音乐本土创新的主体性,藉以引发关注并重视文化资产传承、发展、保存的重要性,尤其台湾的音乐文创产业,在全球华人市场中具指标性的领导地位,如此值得令人骄傲的成果,正是台湾音乐文创产业迈开步伐、大展身手的最佳时刻,更是台湾最大的原动力。