通常在优化网站之前，会对网站进行疏导和调整，理顺网站结构，使蜘蛛更容易爬行。然而，有些网站管理员并不确定网站的哪些设置会影响蜘蛛的爬行。让我们一起来了解一下。
1 登录设置
有的网站会设置注册账号服务，登录后才能看到网站内容。这个设置对蜘蛛不友好，因为蜘蛛在爬行网站时不会自动注册和登录，所以它们将无法识别它们，自然也无法抓取它们。
2 动态URL
所谓动态URL是一个链接中后缀为ASPXASPJSPPerlPHP和CGI的URL。动态URL比静态URL更易更改。搜索引擎通常不信任动态URL，因此许多具有动态URL的页面无法包含在内。
3 使用Cookie
cookies的功能是识别用户的身份。如果网站在优化过程中不打开cookies，将无法访问，这将导致蜘蛛无法访问，从而影响爬行。
4 闪存文件
一些网站在制作中，为了能够增加网站的视觉效果，会为网站设计一些flash文件，但是这些文件在搜索引擎中是看不到的。当然，蜘蛛也比较无法阅读相关内容，这会影响蜘蛛对网站的爬行。因此，为了体现网站优化的较好效果，本次flash不建议做首页图片。
综上所述，以上几点是对一些网站设备对蜘蛛爬行的影响的总结。通过以上认识，相信优化人员也会对网站优化有更深入的了解和掌握，从而制定更好的网站优化方案，为高质量的网站优化铺平道路。
