首页 >
潜在语义学
✍ dations ◷ 2025-08-08 08:59:26 #潜在语义学
潜在语义分析(Latent Semantic Analysis),是语义学的一个新的分支。传统的语义学通常研究字、词的含义以及词与词之间的关系,如同义,近义,反义等等。潜在语义分析探讨的是隐藏在字词背后的某种关系,这种关系不是以词典上的定义为基础,而是以字词的使用环境作为最基本的参考。这种思想来自于心理语言学家。他们认为,世界上数以百计的语言都应该有一种共同的简单的机制,使得任何人只要是在某种特定的语言环境下长大都能掌握那种语言。在这种思想的指导下,人们找到了一种简单的数学模型,这种模型的输入是由任何一种语言书写的文献构成的文库,输出是该语言的字、词的一种数学表达(向量)。字、词之间的关系乃至任何文章片断之间的含义的比较就由这种向量之间的运算产生。潜在语义学的观念也被应用在资讯检索上,所以有时潜在语义学也被称为隐含语义索引(Latent Semantic Indexing,LSI)。隐含语义索引是一种以向量空间模型为基底的资讯检索技术,常以字词-文件矩阵表示字词与文件之间的关联;而其多以行代表字词〈term〉,列代表文件〈document〉。而在矩阵中每个元素的权重值以TF-IDF计算后得到。该字词在某个文件中的重要性,与该字词在该文件中出现的次数成正比,与其在所有文件中出现的次数成反比。而这个字词-文件矩阵本身也代表着一个标准的语义模组,因为数学矩阵的格式并不是经常的被使用,所以不会太特别的注明其为一个矩阵的型态。关于隐含语义索引的其他应用:同义词和多义性是自然语言处理中最基本的问题。同义现象是指不同的词语表示相同的的意思。因此,在搜索引擎不会返回一个文档,即使它与该查询是相关的,只是由于它不包含查询关键词中的词语。例如,查询“doctors”(医生)时,不会返回包含“physicians”(内科医生)的文档,即使它们的意思相同。多义现象是指一个词语含有多种意思。因此,查询的结果可能返回许多不相关的文档,只是由于它们包含了查询关键词中的词语。例如,植物学家和计算机专家在查询同一个关键词“树”的时候,它们希望得到的结果是完全不同的。当生成了词汇-文档矩阵后,LSA提供了一种对它的低维近似(可以通过对字词—文档矩阵的奇异值分解(SVD)来实现)。做这种近似有以下几种原因:奇异值分解(svd)是一种典型的使用大型矩阵的运算方法,会占用较大的存储空间,可以通过一种类似神经网络的计算方法来大大降低这一计算对内存的占用。现在已经有一种快速的,占用内存较低的,计算大型矩阵的svd算法,见应用文献【3】.可以使用MATLAB和Python来实现这一算法。
相关
- 泰诺福韦替诺福韦二吡呋酯(英语:Tenofovir disoproxil),商品名韦瑞德(英语:Viread)惠立妥或其它,是一种用于治疗慢性乙肝以及预防和治疗HIV感染/艾滋病的药物。这种药物属于逆转录酶抑制剂,可
- 伤口伤口(Wound)是人在受伤后留下的损害,是皮肤在切伤、撕裂等受伤后的快速反应,是属于外伤。与之对比的是内伤,即创伤后受到的瘀伤。外伤小腿割伤脚板受感染的伤口玩飞镖时插伤切伤
- 马恩岛马恩岛(英语:Isle of Man,马恩语:Ellan Vannin,简称“Mann”)位于英格兰与爱尔兰之间的海上岛屿,而从更精确的地理角度来看,马恩岛正地处于英格兰、苏格兰、威尔士、北爱尔兰和爱尔
- 氮氧化物氮氧化物(NOx)指的是只由氮、氧两种元素组成的化合物。常见的氮氧化物:其中除五氧化二氮常态下呈固体外,其他氮氧化物常态下都呈气态。作为空气污染物的氮氧化物(NOx)常指NO和NO2
- 国家医疗保障局社会保障基金:全国社会保障基金理事会国家医疗保障局,简称医保局,是中华人民共和国国务院主管医疗保障基金与医疗服务招标采购的副部级直属机构。国家医疗保障局主要负责拟订医
- 婴儿食品婴儿食品指专门制造给0岁到3岁间儿童食用的食品,较软同时有特殊营养符合婴儿需求。世界卫生组织提出一项全球性的公共卫生建议,建议婴儿前六个月应该完全母乳喂养,以达到最佳的
- 摩西摩西(基督教译文)(希伯来语:.mw-parser-output .script-hebrew,.mw-parser-output .script-Hebr{font-size:1.15em;font-family:"Ezra SIL","Ezra SIL SR","Keter Aram Tsova"
- 西罗马帝国西罗马帝国是罗马帝国于286年被戴克里先分为两部分后把政权一分为二建立四帝共治制从而开始有的东西两部的概念,位处西部的部分即是最后分裂的西罗马帝国;而东部最后则成为东
- 灰质灰质(英语:Gray matter),又称为皮质(英语:Cortex),是一种神经组织,是中枢神经系统的重要组成部分。灰质由神经元,神经胶质细胞,微血管组成。灰质的灰色源于神经元的细胞体和微血管。中
- 甲状软骨甲状软骨(thyroid cartilage、盾状软骨)是组成喉部骨骼的九块软骨(透明软骨:甲状软骨1块、环状软骨1块、杓状软骨2块;弹性软骨:会厌软骨1块、小角软骨2块、楔形软骨2块)中最大的,其