蜘蛛的爬行和收录不能被精确控制，但我们可以利用一些积极的因素来影响它，并努力使其更好地被包含。具体分析如下：
1域名的重要性。谷歌的Mattchuts近日在接受采访时承认，网站的覆盖率和蜘蛛爬行深度与PR大致成正比，也就是说，PR越高，你的网站就会越好。
2因为反向链接会成为你网站的主要链接，所以反向链接会成为你网站的主要影响因素。
3深度链接，深层链接是反向链接到内容页面，这些链接会让你的内部页面有很好的SEO优化效果，页面排名和收藏与深度链接会很好。
4导航栏和清晰的层次，对于网站来说，扁平化的结构是最合理的，可以让搜索引擎识别你的内容，更方便的收录，同时，应该有清晰的导航，这样最重要的页面，无论你在哪里输入都可以在4次内点击，在2次以内，这样搜索引擎就能更好地识别和抓取重要页面。
5XML网站地图，这是一件必须做的事情，网页地图将帮助您的网站提高收录和收录的速度，这是毫无疑问的。
6减少相同的内容。做网站的时候，一定要尽量做到原创。根据搜索引擎的不同，也可以根据不匹配的内容给予相同的权重。我们可以看看信息论，深入理解相似页面的权重分配规则。目前，百度等搜索引擎在这方面基本上以信息论为计算核心。
7别致的标题，如果你的标题已经有很多相同的文章，那么搜索引擎会考虑是否有必要包含，所以标题应该尽可能的不同。
8手动设置更新频率，在提交网站地图时手动设置网站更新频率，以便让搜索引擎尽快更新网站。
9更新，回复，ping命令，经常更新和维护内部页面和主页。细节，而不是整体，将提高爬虫的爬行效率。同时，更多的回复也可以提高你的首次出游率。RSS应该被充分利用，因为它可以被理解为一个自动生成的网站地图。建议RSS也应该提交给搜索引擎。
