搜索引擎对于爬虫的定义不是看它的形状,而是看它的特征。之所以取名为蜘蛛,那是因为因为互联网跟蜘蛛网有相同之处。在互联网上,只要存在链接,那么爬虫就能到达任何的页面;而蜘蛛网也是一样的,蜘蛛可以从网上的一个地方去到网上任何其他地方。这就是搜索引擎爬虫跟蜘蛛的相似之处,为了方便大家记忆和理解,搜索引擎就把爬虫称作为蜘蛛。不但是百度,其他的搜索引擎也是如此的叫法。
沐风博客
更新包含SEO培训教程、网站运营及网络推广等互联网资讯