首页 >
潜在语义索引
✍ dations ◷ 2025-07-27 02:12:39 #潜在语义索引
潜在语义索引是一种搜索方法,也是一种索引。通过奇异值分解来识别非结构化的文本集合中的具有联系关系的模式。一般认为,在同样的语境中使用的词语一般具有相似的含义,LSI就是基于这一规则的搜索方法。LSI的一个重要特征就是,通过建立那些出现在相同语境中的词语之间的联系,它能够提取出一个文本的具体内容是什么,而不像以前的搜索方法只是检索具体的关键词。之所以叫潜在语义索引是因为它能够把一组文档中具有隐含的语义联系的词语联系起来。所谓隐性语义索引指的是,怎样通过海量文献找出词汇之间的关系。当两个词或一组词大量出现在同一个文档中时,这些词之间就可以被认为是语义相关。机器并不知道某个词究竟代表什么,不知道某个词是什么意思。
比如:单纯从理论上看,Latent semantic indexing (隐性语义索引)的实现机制并不复杂,它只不过是在正常的网页收录与索引过程中增添了一个步骤:可以看出,虽然搜索引擎本身并不知道某个词究竟代表什么,不知道某个词是什么意思,但通过Latent Semantic Indexing算法,与单纯的关键词匹配相比,搜索引擎能够以一种更准确的方式判断特定网页中内容与搜索项间的相关性,从而给出用户要寻找的内容,甚至从某种角度上看,更接近于“人”分析、查找内容时的判断方式。搜索引擎是使用机器算法来替代过去人工搜索的工作。但机器算法和人的工作有一个很不同的地方就是人可以直接理解词的意思,文章的意思,机器和算法却无法理解——人看到苹果这两个字就知道指的是那个圆圆的,有水的挺好吃的东西,搜索引擎却不能从感性上理解。
其原因和自然语言的特点有关。从自然语言的角度,大部分词具有一词多义的特点,机器算法无法确定在何环境下使用何种词义,这就导致了搜索结果与用户的理想值便存在很大的距离:Latent Semantic Indexing (LSI : 隐性语义索引)便是搜索引擎试图尽可能弱化这一弊端的可行解决方案之一。Latent Semantic Indexing通过绕开自然语言理解,以大样本数量的统计分析找出不同的词(词组、短语)间的相关性,以使搜索结果进一步接近于用户真正要查找的内容,同时,也能够保证搜索的效率。对Latent Semantic Indexing,可能大多数人注意的是其中的Semantic (语义有关的),但Latent Semantic Indexing方面的技术文档则往往更强调Latent (潜在的、隐含的),而非简单意义的语义相关。比如说对“水”一词而言,与其语义相关的可能是“热水”、“凉水”之类,但潜在相关的则可以是“蒸汽”、“冰”等,这里有很大区别。
需要强调的是,Latent Semantic Indexing(隐性语义索引)只是目前搜索引擎排名算法中关键词匹配技术的补充(排名算法会为不同的影响因素赋予不同的权重,Latent Semantic Indexing的权重值已经慢慢加大),但绝不是取代现有的关键词匹配算法。
相关
- 泡菜泡菜古称葅(zū),是指为了利于长时间存放而经过发酵的蔬菜。一般来说,只要是纤维丰富的蔬菜或水果,都可以被制成泡菜;像是卷心菜、大白菜、红萝卜、白萝卜、大蒜、青葱、小黄瓜、
- 淡色藻总门淡色藻门(学名:Ochrophyta)是不等鞭毛类的一大部分光合生物。它被分为两个亚门——Phaeista(包括Hypogyristea和Chrysista)和Khakista(包括Bolidomonas(英语:Bolidomonas)和硅藻纲) 。
- 拉脱维亚面积以下资讯是以2018年估计国家领袖国内生产总值(购买力平价) 以下资讯是以2016年估计国内生产总值(国际汇率) 以下资讯是以2016年估计人类发展指数 以下资讯是以2018年估计拉
- 异麦芽糖异麦芽糖是一种二糖,类似于麦芽糖,但拥有α-(1-6)-糖苷键,而不是麦芽糖的α-(1-4)-糖苷键。可水解为两个葡萄糖分子。 麦芽糖浆在转葡糖苷酶(英语:transglucosidase) (TG,也称α-葡
- 灰质灰质(英语:Gray matter),又称为皮质(英语:Cortex),是一种神经组织,是中枢神经系统的重要组成部分。灰质由神经元,神经胶质细胞,微血管组成。灰质的灰色源于神经元的细胞体和微血管。中
- 义肢装具师义肢装具师(英语:Prosthetist),指负责量制、评估、制作、校正义肢的专业人员。和“义肢师傅”最大差别在于义肢装具师需拥有相关学历及临床训练,并且在执业时亲自接触患者。义肢
- 克拉福德奖克拉福德奖(英语:Crafoord Prize)在1980年由人工肾脏发明者、瑞典人霍尔格·克拉福德(英语:Holger Crafoord)和他的妻子安娜-格蕾塔·克拉福德设立,瑞典皇家科学院管理。设立目的是
- 尤利乌斯·普吕克尤利乌斯·普吕克(德语:Julius Plücker,1801年6月16日-1868年5月22日),德国数学家和物理学家。他曾为解析几何作出过许多基础贡献;同时它还是阴极射线研究的先驱者之一,该研究后来
- 印度电影列表本列表为印度出品的电影资讯。
- 离子晶体离子晶体指的是内部的离子由离子键互相结合的固态物质。离子晶体中含有电荷量相等的阴离子和阳离子,并且这两种离子交替排列,整齐有规律,往往呈现出规则的几何外形。比如:NaCl晶