影响爬虫抓取的外部因素

a）、外部链接

    外链的作用有两个，一个是吸引爬虫来抓取，另外一个是提升排名。

 相关性、流行性、广泛性（给每个网页加外链，不要全部指向首页）。

b）、文章

    文章的原创度、更新频率、独特性。原创文章一定收录，只是时间问题。

c）、权重

    权重是指搜索引擎对你网站的信任程度。权重高网站爬虫数量多、抓取及时。

    权重高的网站有爬虫长期“隐居”。

d)、网站地图

    网站地图促进爬虫爬取，增进收录重要因素。

e）、PR值

    pr值是谷歌对于网站质量的衡量标准，但是PR对SEO的作用非常小。 有些参考意义，但是意义并不是很大了。