在我们的改进过程中，一些网站设计技术对搜索引擎非常不友好，不利于蜘蛛爬行和抓取。这些技术被称为蜘蛛陷阱。以下是以下常见的蜘蛛陷阱。我们必须在工作中尽力防止它们。
一.flash
1.在网页的一小部分使用flash例如，增强视觉效果是正常的flash制成的广告.这么小flash和照片一样，只是html代码的一小部分，页面上还有其他以文字为主的内容，对搜索引擎的抓取和收录没有影响。
2.但是有些网站的整个主页都很大flash文件形成蜘蛛陷阱。搜索引擎抓取的html代码只有一个连向flash没有其他文本内容的文件链接。搜索引擎无法读取flsh文件中的文本和链接。
3.整个网站是一个大网站flash文件，从seo从角度来说是绝对不可能的。flash必须添加。建议在主页上添加一个通向html链接版本。这个链接应该在flash文件以外的html在代码中，搜索引擎跟踪链接可以抓取后面html版本页面。
二.各种跳转
1.搜索引擎除了后面介绍的301转换外，对其他形式的跳转特别敏感，如：302，js，等跳转。
2.一些网站客户在浏览主页时会自动转向目录下的页面。如果是根据客户的位置转向最合适的目录，那是有原因的。但大多数这样的主页没有理由和目的，这样的转换可以避免。
3.如果必须转换，301转换为搜索推荐.将客户网站改为转换可以将页面权重从旧网站转移到新网站。其他方法不利于蜘蛛爬行。
三.框架结构
1.如果你不知道什么是框架结构是框架结构，恭喜你，你已经避免了蜘蛛陷阱，没有必要知道什么是框架结构。如果您在网站设计中仍然使用框架结构，我的建议是取消。
2.使用框架结构设计页面在网站诞生初期非常流行，因为网站的页面更新和维护非常方便。现在网站很少使用框架，不利于搜索引擎抓取是框架越来越不受欢迎的重要原因之一。对于搜索引擎来说，浏览使用框架的网站html文件只包括调用其他文件html该文件的代码不包括文本信息，搜索引擎无法判断该网站的内容。
四.动态url
动态url它是由数据库驱动的网站生成的.含有疑问.等号和参数的网站。一般来说，动态url不利于搜索引擎蜘蛛爬行，应尽量避免。
五.js链接
因为js一些网站喜欢创造许多有吸引力的视觉效果js脚本生成导航系统。这也是更严重的蜘蛛陷阱之一
六.要求登录
有些网站内容放在用户登录后才能看到的会员区域，搜索引擎看不到。蜘蛛不能填写登录名称.密码，密码。
七.强制使用cookies
一些网站记住用户登录信息，以实现某些功能.跟踪客户访问路径等，强迫客户使用cookies，如果客户浏览器没有启用cookies，页面显示异常。搜索引擎蜘蛛等于禁用。cookies强制使用浏览器cookies搜索引擎蜘蛛只能正常浏览。
