众所周知，蜘蛛是搜索引擎抓取网站的工具，蜘蛛对于网站爬行的越深入透彻，对于搜索引擎收录网站越有帮助，如果蜘蛛来到你的网站只爬了几个网页就走了，那么对于搜索引擎来说，你网站绝大部分内容都不会被发现，又何谈收录和排名呢?反之，如果蜘蛛在你的网站爬行的内容越多、越透彻，收录自然也越多，同时搜索引擎对你的网站便越了解。

　　因此，如果我们想要得到一个好的收录，甚至好的网站优化效果，除了每天对于内容的高质量追求之外，还要做好蜘蛛的爬行引导工作，如果第二部做不好，那么你更新再多的文章也都是无用功。

　　那么，如果做好蜘蛛的爬行引导工作呢，这就需要从网站的内部结构入手。

　　1.首先我们要来解决死链接的问题

　　死链接就像是蜘蛛在爬行的时候撞到了墙，路被堵住了，蜘蛛就会换一条路去走，如果网站内部过多的死链接，老是让蜘蛛撞墙，后果可想而知。长此以往，不仅阻碍蜘蛛对于网站内容的深入抓取，而且蜘蛛撞墙撞多了以后恐怕也不会再来了吧。

　　2.再来谈下网站的URL问题

　　URL务必要简单，不要搞太多的乱七八糟的字符，蜘蛛爬久了会晕的。不管搜索引擎技术的发展对于动态url抓取的程度如何，简单轻减得东西无疑更容易获得记忆。

　　3.导航的设置

　　导航是蜘蛛爬行的引导线，良好的导航设置能够引领蜘蛛一级一级的深入到网站的最根本。我们倡导面包屑式的导航。

　　4.文章内链的合理布局

　　在文章中合理的设置关键词以及长尾关键词链接，让蜘蛛可以更深入的爬行到其他东西，并形成文章、栏目、首页之间的相互串联，让蜘蛛畅通无阻的在你的网站内部进行爬行。

　　通过以上方法，一步步引导，让蜘蛛层层深入的爬行你的网站，更多更深入的挖掘你的网站内容，势必对于搜索引擎对于网站的抓取起到良好的促进作用。