蜘蛛抓取数量跟内部链接没有直接的关系

每篇文章都设置了内部链接，但是蜘蛛还是不抓取！言下之意就是说，文章里面的内部链接没有有效提升蜘蛛抓取的数量。事实上，蜘蛛抓取数量跟内部链接没有直接的关系！

通常情况下，每个网站的每个网页都能被蜘蛛抓取到，因为网站通常都会存在分类网页、网站地图等，这些足够提供链接入口。

那为什么文章里面都设置了内部链接，蜘蛛还是不来抓取呢？

其中的原因不在于文章是否设置了内部链接，而是抓取层次不够深，在于网站更新的频率、网站更新的数量，以及网站权重等等。理论上，在网站服务器稳定的情况下，网站权重越高、更新频率越大、更新量越多，究竟蜘蛛抓取就更加频繁，抓取量也会更多，抓取层级也就越深。

当然合理设置内部链接也能起到提供链接入口的作用，让蜘蛛更多的把目标网页的链接收入到待抓取链接库。只不过这里需要注意，提取了链接不等于就会都来抓取，对于待抓取链接库的链接是否抓取，什么时候来抓取，还得看搜索引擎的抓取策略。

在网站网页都有链接入口的情况下，内部链接的作用更多的是权重流通，尤其是文章主体内容里面的相关锚文本内部链接，能够有效的传递权重。所以大家在设置文章内部链接的时候，更多的需要考虑用户体验，注意链接的相关性，而不是考虑提升蜘蛛抓取量。