搜索引擎基本构成有哪些
搜索引擎的基本构成主要包括以下几个部分:
1. 搜索器:也称为网络蜘蛛,是搜索引擎用来爬行和抓取网页的一个自动程序。它在系统后台不停歇地在互联网各个节点爬行,尽可能快的发现和抓取网页。
2. 索引器:它的主要功能是理解搜索器所采集的网页信息,并从中抽取索引项。
3. 检索器:其功能是快速查找文档,进行文档与查询的相关度评价,对要输出的结果进行排序。
4. 用户接口:它为用户提供可视化的查询输入和结果输出的界面。
5. 文档知识库服务器:存储原始网页数据,通常是分布式Key-Value数据库,能根据URL/UID快速获取网页内容。
6. 索引服务器:存储索引数据,主要是倒排表,通常是分块、分片存储,并支持增量更新和删除。
7. 链接分析:收集各网页的链接数据和锚文本,以此计算各网页链接评分,最终会作为网页属性参与返回结果排序。
郑重声明:图文由自媒体作者发布,我们尊重原作版权,但因数量庞大无法逐一核实,图片与文字所有方如有疑问可与我们联系,核实后我们将予以删除。
主办单位:广州小漏斗信息技术有限公司 新企在线数码版权所有 粤ICP备20006251号