网站开发兼职

robots.txt文件，相信大部分站长都知道其作用，通过它可以让搜索引擎蜘蛛不抓取网站的部分目录或文件。（需要提醒的是，网站的目录或文件并不是被抓取得越多越好）。使用Z-Blog 博客的博主很多忽略或者不知道怎么写robots文件，博客吧把自己使用的robots文件放出来供各博主参考下。

韶关网站建设公司

Z-Blog robots.txt文件：

以下是我的一个ZB博客使用的robots.txt文件。

滁州网站建设公司

#robots.txt for gmzhen

#User-agent： *

Disallow： /FUNCTION/

Disallow： /CACHE/

Disallow： /XML-RPC/

商丘网站建设公司

Disallow： /SCRIPT/

Disallow： /ADMIN/

Disallow： /CSS/

Disallow： /LANGUAGE/

Disallow： /DATA/

Disallow： /THEMES/

Disallow： /INCLUDE/

Disallow： /wap.asp

Disallow： /cmd.asp

网站开发兼职

Disallow： /c_option.asp

Disallow： /c_custom.asp

Sitemap： http://www.gmzhen.com/sitemap.xml

提示：对robots.txt文件里的内容不懂的，可以参考下博客吧先前的WP中的robots说明

WordPress博客创建robots.txt文件及其用法

提示：对robots.txt设计的文件或目录不懂的，可以参考博客吧先前的ZB博客文件说明

Z-Blog 了解各个文件的作用

» 转载请注明出处： 博客吧