当前位置： 文档下载 > 所有分类 > IT/计算机 > 互联网 > 搜索引擎架构搜索引擎架构简介。
作为互联网应用中最具技术含量的应用之一，优秀的搜索引擎需要复杂的架构和高效的算法，以
此来支撑对海量数据的获取、存储，以及对用户查询的快速而准确的响应。
下图所示是一个通用搜索引擎的架构示意图。搜索引擎由许多模块组成，各自负责不同的功能作用，相互配合形成完整的架构。
搜索引擎的信息来自于互联网网页，通过网络爬虫将整个互联网的信息获取到本地存储起来。因为互联网中的好多网页是重复的或者相似的，“网页去重”模块就要对此作出检测，去掉重复的网页。
在此之后，搜索引擎就会对抓取到本地的网页进行解析，抽取出网页主体内容，以及页面中包含的指向其他页面的链接。为了加快响应用户的查询速度，网页内容通过“倒排索引”这种高效的查询结构来保存，而网页的链接关系也会保存起来。之所以要保存链接关系，是因为这种关系在网页相关性排序中是可以利用的，通过“链接分析”可以判断页面的相对重要性，对用户提供准确的搜索结果帮助很大
由于网页数量太多，搜索引擎不仅需要保存网页的原始信息，还要存储一些中间的处理结果，使用单台或者少量的机器是不现实的。因此，优秀的云存储与云计算平台显得尤为重要
搜索引擎的架构_IT/计算机_专业资料。搜索引擎架构,搜索引擎技术,搜索引擎框架搜索引擎的架构设计对李彦宏不陌生吧, 他说: 搜索引擎不是人人都能做的领域, 进入...
Google搜索引擎架构研究_专业资料。Google 搜索引擎架构研究 【摘要】 google 做为世界上最成功的网络公司之一,以其巨 大,快速的搜索引擎而著名。但很少有人了解...
Google搜索引擎架构研究_互联网_IT/计算机_专业资料。Google 搜索引擎架构研究 【摘要】 Google 做为世界上最成功的网络公司之一,以其巨大,快速的 搜索引擎而著名...
龙源期刊网 http://www.qikan.com.cn Google 搜索引擎架构研究 作者:陈丽 来源:《中国科技纵横》2013 年第 02 期 【摘要】 Google 做为世界上最成功的网络...
垂直搜索引擎的架构与实现_IT/计算机_专业资料。搜索引擎 Lucene大连理工大学 硕士学位论文 垂直搜索引擎的架构与实现 姓名:许忠学 申请学位级别:硕士 专业:计算机...
因此本文设计并实现了一个基于Luccne的 源代码搜索引擎系统Hicode,来实现快速而准确的源代码搜索。 1.2本文的主要内容和结构本文主要是利用开源的Luccne引擎架构,...
中文搜索引擎技术揭密:系统架构简介_IT/计算机_专业资料。作者描述了自己对互联网搜索引擎的一些独到观点!中文搜索引擎技术揭密:系统架构 互联网发展的今天,一方面离...
大规模Web超文本搜索引擎架构_IT/计算机_专业资料。004 The Anatomy of a Large-Scale Hypertextual Web Search Engine The Anatomy of a Large-Scale Hypert...
商业科技 信息搜索引擎综述及系统架构设计陈 丹 浙江大学城市学院 郭伟青 浙江工业大学之江学院〔摘要〕 本文介绍了搜索引擎的发展与分类,给出了一种搜索引擎的架构...
大规模中文搜索引擎的架构和设计技术_计算机软件及应用_IT/计算机_专业资料。计 算机 科学 ! ? ?% # 吻 # ? 大规 模中 文搜 索 引擎 的架构和设计技术...
我要评论