小鱼儿模板网专注于织梦源码分享、织梦模板、discuz模板、wordpress主题等网站模板,为广大站长提供网站模板以及Discuz插件等素材。
用户名:
密码:
注册

织梦源码,模板王

VIP

CMS教程

站长学院

网站有很多东西不合适蜘蛛爬

www.adminbuy.cn / 2015-03-10
在许多站长看来,网站优化即是要尽量招引蜘蛛到网站上来,但殊不知适当的屏蔽蜘蛛对网站也有优点,AB模板王今日就来剖析一下屏蔽蜘蛛都有哪些优点。
 
  1。屏蔽图像目录
 
  网站中图像是首要元素,许多网站中的图像素材都是从其他网站找来的,搜索引擎是能够分辨出真假的,所以这十分影响网站录入,所以对网站中图像目录“images”进行屏蔽仍是有必要的,这样也节省了不少流量。
 
  2。屏蔽模板目录
 
  网站程序运用模板是很常见的,直接套用模板也是一种重复性十分高的操作,在搜索引擎看来是剩余的,所以要用Robots。txt将模板目录屏蔽掉,这对网站没有任何影响。
 
  3。屏蔽缓存目录
 
  内蒙古网站制作中缓存目录是网站建设程序中常常存在的,缓存目录会让搜索引擎对网站同一内容进行多次索引,影响网站优化。因而要对缓存目录进行屏蔽,这样才干确保网站正常录入。
 
  4。屏蔽CSS目录
 
  搜索引擎通常是不会抓取CSS目录的,由于没有任何含义,即便将它屏蔽也不会对网站形成任何影响。因而能够用Robots。txt文件屏蔽掉CSS目录,有利于搜索引擎索引的质量。
收缩