帮助

什么样的不友好的网站结构-蜘蛛陷阱

2019-04-17 08:46 技术文档
“蛇陷阱”是制止蜘蛛程序爬行网站的障碍物,一般是那些表明网页的技术方法,目前很多浏览器于设计师的时候考量过这些因素,因此也许网页界面看上去十分稳定,但是这些蜘蛛陷阱会对于蜘蛛程序导致障碍,假如去除这些蜘蛛陷阱,可使蜘蛛程序发行越来越余的网页。SEO工作之中,网页遭发行是基础工作,但是对搜索引擎来讲,较难情况会100%发行你网站的所有网页,搜索引擎的爬虫程序设计师的再次精致,亦难以逾越”的蜘蛛陷阱。上面我们来研究一下七小蜘蛛陷阱。
1、掠过建议
有些企业站与个人站的设置某种要登记掠过之后便能看见有关的文章内容,这种对于蛇绝不是非常友谊,蛇绝不会登记、亦绝不会掠过。
2、动态URL
什么叫动态URL、什么叫静态URL,直观的说便是具有问号、等号以及参数的网址便是动态URL,动态URL绝不适于搜寻引擎蛇的爬行与抓取。
3、强迫使用Cookies
部分站长借以让用户忘记掠过信息,强制用户采用Cookies假如作为打开,亦难以展开访问,采访页面表明的亦绝不会稳定,这种方式会让蜘蛛难以展开访问。
4、框架结构
最先各位站长你明白什么叫框架结构的世界吗?假如你绝不明白恭喜你,这个蜘蛛陷阱你已逃避了,亦你们去认识,因此有关框架结构的设计得到做任何的介绍。
5、各种切换
对于搜素引擎来说仅对于301切换相对来说较友谊,对于其他形式的跳转均是较复杂,比如:JavaScrit跳转、MetaRefresh跳转、Flash跳转、302切换。有些网站的做法非常让人不得已,如果你开启网页之后会手动减弱其他页面,便算开启的页面与你要找的页面主体先关亦算过得去。不过非常小部分的网站减弱让你无任何理由与目的这种减弱绝不引荐大家采用,假如你并非要做减弱,仅引荐用301永久性切换,可把权重展开传递,除此减弱其他均绝不引荐,由于很多的占用其他减弱欺骗用户与搜索引擎,亦是heimao的一种手段,因此提议大家你们采用,以防网站遭K。
6、Flash
有的网站网页采用Flash视觉效果是非常稳定的,例如使用Flash做的Logo、广告、图表等,这些对于搜索引擎抓取与发行是没问题的,很多网站的首页是一个小的Flash文件,这种便叫蜘蛛陷阱,于蛇抓取时HTML代码之中仅是一个链接,并且没文字,尽管小的Flash效果看似非常糟糕,外观看着亦非常美丽,但是可是搜素引擎看到,难以读取任何内容因此借以能反映网站改进的最为糟糕效果,绝不倡导这种Flash做首页图片。
7、java链接
例:网址
我们明白了有七小蜘蛛陷阱,那麽我们于SEO之中该如何防止这七小蜘蛛陷阱呢?
1、使用session id的页面 有的销售类站点借以研究用户的某些信息会使用会话ID来追踪用户,采访站点的时候每个用户采访均会减少一次session id因而退出到URL之中,一样蛇的每一次访问亦会遭当作为一个全新用户,每次蛇来采访的URL之中均会退出一个session id,这样便会造成了同一一个页面但是URI有所不同的情况,这种的即便会造成复制内容页面,导致了最高点反复的内容篇,除此之外亦是最为常用的蜘蛛陷阱之一。比如说有的网站的借以提升销售业绩,因而展开弹窗会话等,比如说您好源自XXX地的朋友等。
2:常识性的蜘蛛陷阱
使用强迫登记或是指定便能采访的页面,这种的对蜘蛛来说便非常作为容易了,由于蛇难以递交登记,越来越难以输出用户名与密码登录查看内容,对蜘蛛来说我们间接点击查看见的内容亦是蜘蛛所能看见的内容。
3、对喜爱使用flash的站点,或许算是喜爱使用flash的站点是由于对一些之中小型企业来说,由于flash本身可做非常多种效果,特别是放到GPS上视觉效果弱,因此不少企业站喜爱弄个flash来展现自己公司的实力,文化,产品等,而且一些企业站点的网站首页便是一个flash,那么是于多长时间之后透过flash跳转到另外一个页面,那么便是透过flash之上的链接让用户自己浏览之后转入一个全新的页面,不过对蛇来说一来是非常容易读取flash之中的内容,因此蜘蛛亦非常难题击flash之上的链接。
4、对动态URL,于url之中退出过余的符号或是网址参数等,这种蜘蛛陷阱我于url改进之中曾有提及,尽管说随著搜索引擎的的技术发展,动态url对蛇的抓取已愈来愈绝不是问题了,不过自搜索引擎友谊度之上来说,静态只不过是伪静态url相对来说均高于动态url要糟糕,可看之下很多SEO同行对url之中的处理方式。


相关推荐

QQ在线咨询