自我认知的搜索引擎蜘蛛工作流程

第1步:搜索引擎会派出蜘蛛,当蜘蛛接收到命令后就会到互联网上到处浏览网页,并对互联网中的一些内容做出初步的过滤;
第2步:蜘蛛将抓取到的一些觉得有意义的内容,存放在临时数据库中;
第3步:经过层层筛选将一些内容质量较高的页面建立索引;
第4步:从这些索引中提出内容进行收录,也就是我们所看到的展示在搜索结果中的页面。

猜你喜欢

转载自blog.51cto.com/14563021/2443449