首页 >
潜在语义索引
✍ dations ◷ 2025-04-03 16:49:05 #潜在语义索引
潜在语义索引是一种搜索方法,也是一种索引。通过奇异值分解来识别非结构化的文本集合中的具有联系关系的模式。一般认为,在同样的语境中使用的词语一般具有相似的含义,LSI就是基于这一规则的搜索方法。LSI的一个重要特征就是,通过建立那些出现在相同语境中的词语之间的联系,它能够提取出一个文本的具体内容是什么,而不像以前的搜索方法只是检索具体的关键词。之所以叫潜在语义索引是因为它能够把一组文档中具有隐含的语义联系的词语联系起来。所谓隐性语义索引指的是,怎样通过海量文献找出词汇之间的关系。当两个词或一组词大量出现在同一个文档中时,这些词之间就可以被认为是语义相关。机器并不知道某个词究竟代表什么,不知道某个词是什么意思。
比如:单纯从理论上看,Latent semantic indexing (隐性语义索引)的实现机制并不复杂,它只不过是在正常的网页收录与索引过程中增添了一个步骤:可以看出,虽然搜索引擎本身并不知道某个词究竟代表什么,不知道某个词是什么意思,但通过Latent Semantic Indexing算法,与单纯的关键词匹配相比,搜索引擎能够以一种更准确的方式判断特定网页中内容与搜索项间的相关性,从而给出用户要寻找的内容,甚至从某种角度上看,更接近于“人”分析、查找内容时的判断方式。搜索引擎是使用机器算法来替代过去人工搜索的工作。但机器算法和人的工作有一个很不同的地方就是人可以直接理解词的意思,文章的意思,机器和算法却无法理解——人看到苹果这两个字就知道指的是那个圆圆的,有水的挺好吃的东西,搜索引擎却不能从感性上理解。
其原因和自然语言的特点有关。从自然语言的角度,大部分词具有一词多义的特点,机器算法无法确定在何环境下使用何种词义,这就导致了搜索结果与用户的理想值便存在很大的距离:Latent Semantic Indexing (LSI : 隐性语义索引)便是搜索引擎试图尽可能弱化这一弊端的可行解决方案之一。Latent Semantic Indexing通过绕开自然语言理解,以大样本数量的统计分析找出不同的词(词组、短语)间的相关性,以使搜索结果进一步接近于用户真正要查找的内容,同时,也能够保证搜索的效率。对Latent Semantic Indexing,可能大多数人注意的是其中的Semantic (语义有关的),但Latent Semantic Indexing方面的技术文档则往往更强调Latent (潜在的、隐含的),而非简单意义的语义相关。比如说对“水”一词而言,与其语义相关的可能是“热水”、“凉水”之类,但潜在相关的则可以是“蒸汽”、“冰”等,这里有很大区别。
需要强调的是,Latent Semantic Indexing(隐性语义索引)只是目前搜索引擎排名算法中关键词匹配技术的补充(排名算法会为不同的影响因素赋予不同的权重,Latent Semantic Indexing的权重值已经慢慢加大),但绝不是取代现有的关键词匹配算法。
相关
- 妇产科人体解剖学 - 人体生理学 组织学 - 胚胎学 人体寄生虫学 - 免疫学 病理学 - 病理生理学 细胞学 - 营养学 流行病学 - 药理学 - 毒理学妇产科学是医学中的一门学科,简称OB/GY
- 抗心绞痛药抗心绞痛药(英语:Antianginal)是指任何一种用于心绞痛的药物,属于缺血性心脏病的一种症状。 可以分为三类:抗高血压药 · 利尿剂 · 血管舒张剂 · β受体阻断剂 · 钙离
- 普鲁士蓝普鲁士蓝(英语:Prussian blue;德语:Preußisch Blau 或 Berliner Blau;化学名称:亚铁氰化铁;分子式:Fe7(CN)18⋅14H2O,或书写成Fe43 · xH2O简称:PB)是一种深蓝色的颜料,在画图和青花瓷
- 图书馆员图书馆员是负责图书馆运营的专业人员,其工作包括对馆藏资源的采购、加工、描述、流通(借还)、分析报导、点算书籍、盘点书本、检查书籍、把书本排列好次序、上书、帮忙读者寻找
- 库仑库仑(英语:Coulomb)是电荷量的单位,符号为 C {\displaystyle \mathrm {C} } 。若导线中载有1安培的稳定电流,则
- 品质控制质量控制(英语:quality control,缩写为 QC)是质量管理的一部分,致力于满足质量要求。中国全国科学技术名词审定委员会对质量控制的一种定义为:“为使客户确信某一物品或服务的质量
- 部落联盟有虞氏,又称虞朝,是中国历史上一个可能存在过数百年的王朝,在夏朝之前。虞朝位于今山西平陆西南,舜是虞朝的最后一位君主。在《左传》、《国语》中,虞夏商周四代连称的文句不胜枚
- 坏血症坏血病(拉丁语:Scorbutus,英语:Scurvy)又称为坏血症、水手病,是一种因缺乏维生素C所引起的疾病。维生素C主要参与人体内胶原的合成,其化学名称是抗坏血酸,源自坏血症的拉丁名scorbut
- 罗伯特·G·爱德华兹罗伯特·杰弗里·爱德华兹爵士,CBE,FRS(英语:Sir Robert Geoffrey Edwards,1925年9月27日-2013年4月10日),英国生理学家,生殖医学的先驱者,因“开发体外受精技术”的成就被授予2010年
- 特立尼达蝎子壮汉T辣椒特立尼达毒蝎布奇T辣椒又名特立尼达蝎子壮汉T辣椒、特立尼达毒蝎辣椒(Trinidad Scorpion Butch T pepper),曾是世界纪录最辣的辣椒,该记录在2012年被卡罗莱纳死神超越。它是黄灯