首页 >
潜在语义学
✍ dations ◷ 2025-04-04 11:08:35 #潜在语义学
潜在语义分析(Latent Semantic Analysis),是语义学的一个新的分支。传统的语义学通常研究字、词的含义以及词与词之间的关系,如同义,近义,反义等等。潜在语义分析探讨的是隐藏在字词背后的某种关系,这种关系不是以词典上的定义为基础,而是以字词的使用环境作为最基本的参考。这种思想来自于心理语言学家。他们认为,世界上数以百计的语言都应该有一种共同的简单的机制,使得任何人只要是在某种特定的语言环境下长大都能掌握那种语言。在这种思想的指导下,人们找到了一种简单的数学模型,这种模型的输入是由任何一种语言书写的文献构成的文库,输出是该语言的字、词的一种数学表达(向量)。字、词之间的关系乃至任何文章片断之间的含义的比较就由这种向量之间的运算产生。潜在语义学的观念也被应用在资讯检索上,所以有时潜在语义学也被称为隐含语义索引(Latent Semantic Indexing,LSI)。隐含语义索引是一种以向量空间模型为基底的资讯检索技术,常以字词-文件矩阵表示字词与文件之间的关联;而其多以行代表字词〈term〉,列代表文件〈document〉。而在矩阵中每个元素的权重值以TF-IDF计算后得到。该字词在某个文件中的重要性,与该字词在该文件中出现的次数成正比,与其在所有文件中出现的次数成反比。而这个字词-文件矩阵本身也代表着一个标准的语义模组,因为数学矩阵的格式并不是经常的被使用,所以不会太特别的注明其为一个矩阵的型态。关于隐含语义索引的其他应用:同义词和多义性是自然语言处理中最基本的问题。同义现象是指不同的词语表示相同的的意思。因此,在搜索引擎不会返回一个文档,即使它与该查询是相关的,只是由于它不包含查询关键词中的词语。例如,查询“doctors”(医生)时,不会返回包含“physicians”(内科医生)的文档,即使它们的意思相同。多义现象是指一个词语含有多种意思。因此,查询的结果可能返回许多不相关的文档,只是由于它们包含了查询关键词中的词语。例如,植物学家和计算机专家在查询同一个关键词“树”的时候,它们希望得到的结果是完全不同的。当生成了词汇-文档矩阵后,LSA提供了一种对它的低维近似(可以通过对字词—文档矩阵的奇异值分解(SVD)来实现)。做这种近似有以下几种原因:奇异值分解(svd)是一种典型的使用大型矩阵的运算方法,会占用较大的存储空间,可以通过一种类似神经网络的计算方法来大大降低这一计算对内存的占用。现在已经有一种快速的,占用内存较低的,计算大型矩阵的svd算法,见应用文献【3】.可以使用MATLAB和Python来实现这一算法。
相关
- 外毒素外毒素(英语:Exotoxin)是细菌分泌到菌体外的毒性物质,能损坏宿主细胞或引起宿主细胞代谢紊乱,其毒性甚强,可造成重大损害。医学导航:毒理学毒理学 / 毒素中毒和毒性解毒剂
- 三酸甘油酯甘油三酯(triglyceride, TG, triacylglycerol, TAG, or triacylglyceride),亦作三酸甘油酯,常称为油脂,为动物性油脂与植物性油脂的主要成分,一种由一个甘油分子和三个脂肪酸分子
- 金刚烷金刚烷(化学式:C10H16,三环癸烷)是无色晶状固体,有樟脑气味。化学性质稳定,对光稳定,亲油性强,天然存在于石油中。它是分子式为C10H16的异构体中最稳定的。金刚烷的碳架结构相当于是
- 行政办公室总统行政办公室(英语:Executive Office of the President,缩写为EOP),又译为总统办事机构,是对美国总统的贴身幕僚人员、以及直接向总统负责的各级助理人员及机关之总称,其架构起始
- 减肥减肥学(bariatrics)是医学的一个分支,目的在探讨肥胖症的起因、预防及治疗。一般简称为减肥、纤体、瘦身或秀身,是指采用人为手段故意降低体重,特别是减少体内的脂肪。减肥的原因
- 原子核原子核(德语:Atomkern,英语:Atomic nucleus)是原子的组成部分,位于原子的中央,占有原子的大部分质量。组成原子核的有中子和质子。当周围有和其中质子等量的电子围绕时,构成的是原子
- DOB布苯丙胺(Brolamfetamine),全称二甲氧基溴安非他明(2,5-dimethoxy-4-bromoamphetamine),简称DOB,第一类精神药品。1967年被首次合成。
- 婴儿配方奶粉婴儿配方奶粉又称母乳化奶粉,是以牛乳或其他动物乳或其他动植物成分为基本成分,适当添加营养素,可供给婴儿生长与发育所需营养的一种婴儿食品,用作母乳的替代品。母乳是婴儿最理
- 现象论现象主义(Phenomenalism ),认为物理对象无法被证明是自在存在的,而只能作为出现在时空中的感知现象或感觉刺激(如红色性、硬度、柔软度、甜味度等)而存在。特别是某些形式的现象主
- 萘普生萘普生(英语:Naproxen、INN),是一种NSAID,用于缓解普通或严重的疼痛、发热、发炎,以及由骨关节炎、类风湿性关节炎、银屑病关节炎、痛风、强直性脊柱炎、经痛、肌腱炎、滑囊炎等病