×

根目录 SEO 百度 Google

Z-Blog博客创建设计robots.txt文件

小虎 小虎 发表于2012-03-05 00:37:18 浏览1948 评论32

32人参与发表评论

robots.txt文件，robots.txt是搜索引擎中访问网站的时候要查看的第一个文件。robots.txt文件告诉蜘蛛程序在服务器上什么文件是可以被查看的。相信大部分站长都知道其作用，通过它可以让搜索引擎蜘蛛不抓取网站的部分目录或文件。需要提醒的是，网站的目录或文件并不是被抓取得越多越好。使用z-blog博客的博主很多忽略或者不知道怎么写robots文件，于是把自己使用的robots文件放出来供各博主参考下。如果你不知道怎么写，可以创建一个空白的纯文本文件robots.txt放在根目录下（本站就是）。

 

以下是我的一个ZB博客使用的robots.txt文件：

#robots.txt for huhen.com
#User-agent: *
Disallow: /FUNCTION/
Disallow: /CACHE/
Disallow: /XML-RPC/
Disallow: /SCRIPT/
Disallow: /ADMIN/
Disallow: /CSS/
Disallow: /LANGUAGE/
Disallow: /DATA/
Disallow: /THEMES/
Disallow: /INCLUDE/
Disallow: /cmd.asp
Disallow: /c_option.asp
Disallow: /c_custom.asp
Allow: /
Allow: /sitemap.xml
Sitemap: https://huhen.com/sitemap.xml

群贤毕至

访客
烘干机 烘干机2014-12-06 16:55:59 | 回复 好好学习
明升M88开户 明升M88开户2014-03-06 17:03:56 | 回复 来学习一下
admin admin2012-05-15 18:59:49 | 回复 你想怎样修饰,说说看?
华宇豪庭 华宇豪庭2012-05-15 17:48:49 | 回复 怎样对博客内容进行修饰呢
长沙骨科医院 长沙骨科医院2012-03-24 09:53:08 | 回复 来学习一下！希望以后博主多发好文章！
手术示教 手术示教2012-03-21 15:10:31 | 回复 以后好好学习~~
风机盘管 风机盘管2012-03-14 15:15:57 | 回复 希望能学习到更多的知识
admin admin2012-03-08 18:07:05 | 回复 欢迎哈
龙门刨 龙门刨2012-03-08 16:22:07 | 回复 你的文章感觉不错，希望能学习到你更多的知识
紫薯窝 紫薯窝2012-03-08 12:18:54 | 回复 想问下可不可以只写Disallow，然后剩余部分就默认为allow?我只摘抄了你的disallow部分。谢谢博主百忙之中回复我
admin admin2012-03-08 10:17:45 | 回复 我设置的也是空白的robots.txt
企业文化 企业文化2012-03-08 10:03:25 | 回复 我的网站没设置ROBOTS。
admin admin2012-03-07 17:44:13 | 回复 php博客我用过bo-blog.到后面我换过pjblog直到现在的zblog.WP没有用过.其实robots.txt写法很简单,就是哪些目录需要访问,哪些目录不需要访问.
韩版女装 韩版女装2012-03-07 17:28:41 | 回复 zblog没啥子研究一直用WP
admin admin2012-03-07 16:07:11 | 回复 [F]Haha[/F]
admin admin2012-03-07 16:04:59 | 回复 欢迎
admin admin2012-03-07 15:56:53 | 回复 robots.txt写错了会影响收录的喔~!
admin admin2012-03-07 15:52:40 | 回复 欢迎
鱼干女 鱼干女2012-03-07 14:41:28 | 回复 来学习一下啦
淘宝聚划算 淘宝聚划算2012-03-07 14:18:08 | 回复 robots文件的确很重要，这方面的东西一定要深入学习一下
紫薯窝 紫薯窝2012-03-07 12:26:30 | 回复 robots.txt我暂时没管它，看到博主的这篇博文，决定试下。
杀破狼 杀破狼2012-03-07 10:48:34 | 回复 博主文章很棒啊
青岛葡萄酒 青岛葡萄酒2012-03-07 10:48:12 | 回复 来学习下经验了啊
狗粮 狗粮2012-03-06 23:32:02 | 回复 学习了博主
羊奶粉 羊奶粉2012-03-06 23:27:55 | 回复 这这个行业还不怎么了解
办公文秘网 办公文秘网2012-03-06 17:40:01 | 回复 看看，文章不错，来访一下
admin admin2012-03-06 17:26:38 | 回复 [F]Haha[/F]
感应门 感应门2012-03-06 16:43:07 | 回复 嗯
admin admin2012-03-05 22:38:26 | 回复 OK
720P资源站 720P资源站2012-03-05 22:25:59 | 回复 这东西不错 收了先
admin admin2012-03-05 16:45:22 | 回复 [F]Haha[/F]
康佳直销 康佳直销2012-03-05 15:54:43 | 回复 刚刚接触这个行业 对着方面真的还不是很了解 看了你的文章感觉不错，希望能学习到你更多的知识