作为一枚专业的SEOer,我们都知道网站就像树状图结构一样。这样不仅有利于搜索引擎抓取,同样的也迎合了用户分类的知识习惯。搜索引擎的数据库可以同化到一个超级图书馆,每个网站都是超级图书馆阅览室里的一个小书架。搜索引擎希望在每个书架上都有“书籍-知识,信息有序放置,并提供用户友好的导航。但事实上,搜索引擎数据库本质上是一个大型图书馆,他们的日常工作和图书馆管理员的工作有很多相似之处。只关注搜索引擎:将读者可能喜欢的书放在可见的位置。但是有的站点网站结构设计优化等等对于搜索引擎来说都是不友好的,不利于蜘蛛爬取,我们简单称之为蜘蛛陷阱,我们常见的一些不利于优化的蜘蛛陷阱有哪些那
1.FIash
使用Flash来增强视觉效果在页面的一小部分中是非常正常的,比如一些广告图片。这些小部分对搜索引擎没有任何影响,但是有些网站整个主页是一个大的Flash文件,不利于搜索引擎友好,这构成了蜘蛛陷阱。并且蜘蛛是不会抓取这类插件等等。如果必须添加效果,至少在第一页需要添加对HTML版本的链接访问权限,搜索引擎可以跟踪此链接以抓取HTML版本页面。
2.各种跳转
搜索引擎对其他形式的跳转更为敏感,例如302跳转,Flash跳转,JavaScript跳转,MetaRefreshJump。一些网站用户访问主页会自动重定向到一个目录页面,这些操作没有任何原因和目的,对蜘蛛爬行不利。所以,除非不得已,尽量不要使用跳跃。
3.框架结构
不要使用IFRAME或Frame框架网页。搜索对用IFRAME框架的网页很难收录。这类框架结构来设计一个页面在早期已经很流行,但现在网站已经很少使用这个框架,这不利于搜索引擎蜘蛛。尽量布局简洁,减少Table嵌套,采用现在流行的DIV+CSS网页布局模式。加快网页加载速度。这样才利于搜索引擎的收录。
4.动态网址
通常动态URL不利于搜索引擎蜘蛛爬行与优化,站长们应该避免网站过多的存在动态网页。
5.需要登录
用户登录后可以看到一些网站内容放在会员区,这部分内容不能被搜索引擎抓取。蜘蛛无法填写用户名,密码,并且无法注册。
6.使用Cookies
为了实现某些功能,如记住用户登录信息,跟踪用户查看路径等。有些网站强制用户使用cookie,如果您不使用用户的浏览器,页面显示不正确。搜索引擎蜘蛛相当于一个禁用的cookies浏览器,如果强制使用,搜索引擎蜘蛛将无法正常访问该网站。