8个常见的搜索引擎蜘蛛陷阱

蜘蛛陷阱是指网站设计时使用了对搜索引擎不友好的技术,不利于搜索引擎蜘蛛的爬行喝抓取,这些技术就被称为蜘蛛陷阱。下面为大家介绍常见的一些蜘蛛陷阱。

常见蜘蛛陷阱一:要求登陆

有些网站设置成必须要注册登陆后才能看到更多信息,而搜索引擎蜘蛛是不会注册、也不会登陆的,这样的设置会导致网站内容无法被收录,更别说优化排名了。

常见蜘蛛陷阱二:首页全部Flash

网站使用Flash来提升视觉效果是很正常的,比如用Flash做的广告、Logo、头部大图等,虽然搜索引擎无法识别Flash内容,但是对网站整体SEO的影响不大。

但是有些网站把整个首页设置成一个大的Flash文件,这种就是一个蜘蛛陷阱,因为搜索引擎完全无法判断网站首页的内容是什么。而网站首页的权重通常是最高的,也是最容易优化的,首页全部Flash的做法让后期SEO优化的工作变得非常困难。

常见蜘蛛陷阱三:过于复杂的动态URL

早期的搜索引擎对于动态URL的抓取能力比较差,所以一般都会在进行网站SEO优化时会采用URL伪静态的方式对动态URL进行处理。关于动态URL是否不利于搜索引擎的观点,目前存在一些争议,主流搜索引擎都声称自己完全有能力识别抓取动态URL的页面,但是在实际的网站建设中,还是不建议动态URL包含太多参数、过于复杂,因为参数太多肯定会跟搜索引擎蜘蛛带来一定的抓取难度。

常见蜘蛛陷阱四:各种跳转

对搜索引擎来说,只有301跳转是比较友好的,而其它形式的各种跳转都比较敏感,比如JavaScrit跳转、MetaRefresh跳转、Flash跳转、302跳转等,都被搜索引擎视为不那么友好的跳转。所以建议网站在做跳转的时候尽量采用对搜索引擎友好的301跳转,不要使用其他对搜索引擎不友好的跳转形式。

常见蜘蛛陷阱五:框架结构

框架结构Frame的网站现在都比较少,基本上都被div+css所取代框架结构是非常不利于搜索引擎蜘蛛抓取的,是典型的蜘蛛陷阱之一。

常见蜘蛛陷阱六:强制使用Cookies

有些网站为了实现某种功能,强制用户使用Cookies,而搜索引擎蜘蛛相当于一个禁用了Cookies的浏览器,强制使用Cookies的网站只能导致搜索引擎无法正常访问。

常见蜘蛛陷阱七:使用Session ID

有些网站使用Session ID跟踪用户访问,每个用户访问时都会形成一个特定的URL,其中就包含了Session ID的信息。而搜索引擎蜘蛛每次访问都会被当作一个新的用户,URL中也会加上一个不同的Session ID,这样就导致搜索引擎蜘蛛每次访问同一个页的URL都不一样。

搜索引擎遇到这种含有Session IDURL时,会尝试判断字符串属于正常参数还是Session ID,如果能成功判断出Session ID的话就会自动去掉Session ID收录正常的URL,但毕竟搜索引擎不是万能的,也存在无法成功判断Session ID的情况,这样就会导致搜索引擎不收录或者收录大量的内容完全相同的URL,形成大量的复制内容,不利于SEO优化。

因此,Session ID也是常见的搜索引擎蜘蛛陷阱之一。

常见蜘蛛陷阱八:使用JavaScript链接

有些网站喜欢使用JavaScript脚本生成导航系统,因为JavaScript可以创造出很多吸引人的视觉效果,这也是比较严重的蛛蛛陷阱因为搜索引擎对于解析JS脚本存在困难。

复杂的JavaScript链接不利于搜索引擎优化,是典型的搜索引擎蜘蛛陷阱之一。所以网站上的链接必须使用最简单标准的HTML链接,尤其是导航系统。用CSS做导航系统一样可以实现很多视觉效果。

以上便是为大家分享的8个常见的搜索引擎蜘蛛陷阱,希望大家在进行SEO优化时尽量避免这些蜘蛛陷阱。



发表评论

电子邮件地址不会被公开。 必填项已用*标注