最近我的网站(http://www.zdseo.com)出了点小问题,弄得我一时是丈二和尚摸不着脑袋,之前关键词“武汉网站优化”我们已经排到了百度13位,正准备高歌猛进之际,没想到下一次的百度更新中,我的小站一下掉到了70多位后面,然后查不到百度快照,site:www.zdseo.com得到的快照页面都是一个月之前的,首页也不在第一位了。我想,完,这下好,莫非是我动作过猛被百度降权了?同时在谷歌中也表现很奇怪,虽然排名现在已经到了地6位,但是他的外观有点格外的与众不同,一般被谷歌正常收录的网站,他们的标题和描叙的内容都是首页上面的标题和描叙,而我这个标题只有一个“武汉网站优化”描叙为空,在我实际的首页里的描叙有30多字,标题也有10几个字符左右。一般的搜索结果里面,结构一般是这样的,最上边是标题,其次是描叙,下面是网址和“网页快照”“类似结果”,而我这个搜索结果中,下面除了一个网址和一个“类似结果”就什么都没有了。在我百思不得其解的时候,今天无意中查看谷歌管理员工具的错误检查项目,突然发现里面有117条错误,原来是robot限制了蜘蛛访问权限,蜘蛛们都不能访问我的网站。于是立即把robot修改过来。下面也顺便学习下robot的知识,温故而知新嘛。
robot的语法很多,内容也很丰富,但是真正用的着的也就那么几条:
1.禁止所有搜索引擎访问:
User-agent: *
Disallow: /
2.允许所有搜索引擎访问:
User-agent: *
Disallow:
或者你建立一个空的robot.txt文件也可以
3.禁止搜索引擎访问某几个目录(比如:admin,temp,zdseo)
User-agent: *
Disallow: /admin/
Disallow: /temp/
Disallow: /zdseo/
还有禁止某些搜索引擎蜘蛛访问的写法,我觉得那个就没必要了解了,作为一般站长都会希望蜘蛛来得越多越好,一般也没这个需求。

 

武汉网站优化为您提供专业 提高百度排名网站优化网站建设 服务:http://www.zdseo.com

公司电话:027-87791300   027-61298585   业务QQ:854372085

原创文章如转载请注明:转载自『武汉网站优化|网站排名|网站推广|SEOhttp://www.zdseo.com/
将本文收藏到网摘: google书签  新浪ViVi   Poco网摘  365key天天网摘   yahoo收藏  windows live书签  添加到del.cio.us  加入收客收藏  分享到饭否  天极网摘  和讯网摘  百度收藏  QQ书签  有道阅读