首页 >
潜在语义学
✍ dations ◷ 2025-07-11 16:58:30 #潜在语义学
潜在语义分析(Latent Semantic Analysis),是语义学的一个新的分支。传统的语义学通常研究字、词的含义以及词与词之间的关系,如同义,近义,反义等等。潜在语义分析探讨的是隐藏在字词背后的某种关系,这种关系不是以词典上的定义为基础,而是以字词的使用环境作为最基本的参考。这种思想来自于心理语言学家。他们认为,世界上数以百计的语言都应该有一种共同的简单的机制,使得任何人只要是在某种特定的语言环境下长大都能掌握那种语言。在这种思想的指导下,人们找到了一种简单的数学模型,这种模型的输入是由任何一种语言书写的文献构成的文库,输出是该语言的字、词的一种数学表达(向量)。字、词之间的关系乃至任何文章片断之间的含义的比较就由这种向量之间的运算产生。潜在语义学的观念也被应用在资讯检索上,所以有时潜在语义学也被称为隐含语义索引(Latent Semantic Indexing,LSI)。隐含语义索引是一种以向量空间模型为基底的资讯检索技术,常以字词-文件矩阵表示字词与文件之间的关联;而其多以行代表字词〈term〉,列代表文件〈document〉。而在矩阵中每个元素的权重值以TF-IDF计算后得到。该字词在某个文件中的重要性,与该字词在该文件中出现的次数成正比,与其在所有文件中出现的次数成反比。而这个字词-文件矩阵本身也代表着一个标准的语义模组,因为数学矩阵的格式并不是经常的被使用,所以不会太特别的注明其为一个矩阵的型态。关于隐含语义索引的其他应用:同义词和多义性是自然语言处理中最基本的问题。同义现象是指不同的词语表示相同的的意思。因此,在搜索引擎不会返回一个文档,即使它与该查询是相关的,只是由于它不包含查询关键词中的词语。例如,查询“doctors”(医生)时,不会返回包含“physicians”(内科医生)的文档,即使它们的意思相同。多义现象是指一个词语含有多种意思。因此,查询的结果可能返回许多不相关的文档,只是由于它们包含了查询关键词中的词语。例如,植物学家和计算机专家在查询同一个关键词“树”的时候,它们希望得到的结果是完全不同的。当生成了词汇-文档矩阵后,LSA提供了一种对它的低维近似(可以通过对字词—文档矩阵的奇异值分解(SVD)来实现)。做这种近似有以下几种原因:奇异值分解(svd)是一种典型的使用大型矩阵的运算方法,会占用较大的存储空间,可以通过一种类似神经网络的计算方法来大大降低这一计算对内存的占用。现在已经有一种快速的,占用内存较低的,计算大型矩阵的svd算法,见应用文献【3】.可以使用MATLAB和Python来实现这一算法。
相关
- 前房积血前房积血(hyphema)指眼睛的角膜前房因积血而导致眼角膜泛红,眼角膜也可能肿胀。通常因受到撞击而导致眼角膜前房积血。前房积血可能导致暂时性失明。需要医药治疗否则可能导致
- 乳酸乳酸(IUPAC学名:2-羟基丙酸)是一种化合物,它在多种生物化学过程中起作用。它是一种羧酸,分子式是C3H6O3。它是一个含有羟基的羧酸,因此是一个α-羟酸(AHA)。在水溶液中它的羧基释放
- 血色沉着病血色沉着病(Hemochromatosis),又名血色素沉着症、血铁沉积症或血色病是指:
- 印第安战争法兰西王国 (1622–1763)英格兰 (1622–1707)大英帝国 (1622–1867)美国 (1783–1924)北美印第安战争(英语:American Indian Wars)是在美国和加拿大用来描述一系列的美国和加拿
- 微观经济学微观经济学(英语:Microeconomics),又译微观经济学,有时称为价格理论,是现代经济学的一个分支,研究经济体系中最基本单元(个体、企业)的经济行为。微观经济学重视需求与供给,如何影响个
- 热岛现象热岛效应是一个自1960年代开始,在世界各地大城市所发现的一个地区性气候现象。具体来说,无论从早上到日落以后,城市的气温都比周边地区来得高,并容易产生雾气。这个现象的发现,是
- 共价半径共价半径定义为由共价键结合的两个原子核之间距离的一半,单位通常使用皮米(pm)或埃(Å)。He、Ne、Ar等原子无共价半径数据,因至今未合成其任何共价化合物。同周期元素的单键共
- 胸管胸腔闭式引流术,又称“胸廓造口术、胸腔管手术”,是一种较为简单的外科手术。一般用于治疗各种胸腔积水、胸腔积液(英语:pleural effusion)和气胸等。过程是先进行局部麻醉后,在肋
- 期刊期刊文献(又称为定期刊物、连续出版刊物等,一般简称为期刊) 是一种出版品,供人阅读、参考、引用等。期刊通常每隔一段时间出版,称之为一期。期刊是一个统称,是一个按照出版时距而
- 研究研究是用主动和系统方式的过程,是为了发现、解释或校正事实、事件、行为、或理论,或把这样事实、法则或理论作出实际应用。“研究”一词常用来描述关于某一特殊主题的资讯收集