记录ZBLOG PHP程序robots.txt文件的正确写法

从搜索引擎规范角度看,我们的网站在使用CMS程序之后是需要配置robots.txt文件的。比如WordPress程序目前会自动生成内置的robots.txt文件,但是在使用ZBLOG PHP程序的时候是没有自动生成的,我们需要手动添加到网站根目录。

严格意义上讲,robots.txt文件还是比较有用的,但是对于国内来说用途好像不是特别的大,既然我们需要加上,这里老蒋就整理一个通用的文档。我们先看看ZBLOG PHP的固定的目录是有哪些。

记录ZBLOG PHP程序robots.txt文件的正确写法

这里我们看到ZBLOG PHP目录。如果我们在安装完毕程序之后,zb_install目录是可以删除的。然后我们需要屏蔽掉zb_system和zb_users目录不要被抓取,其他可以留着。但是对于主题、图片库是需要留着的。

User-agent: *
Disallow: /zb_system/
Disallow: search.php
Disallow: /zb_users/data/
Disallow: /zb_users/language/
Disallow: /zb_users/logs/
Sitemap:https://www.itbulu.com/sitemap.xml

这我们需要保存为robots.txt文件,然后需要注意地图文件需要用到对应的插件实现。

投上你的一票

本文出处:老蒋部落 » 记录ZBLOG PHP程序robots.txt文件的正确写法 | 欢迎分享( 公众号:老蒋朋友圈 )

公众号 「老蒋朋友圈」获取站长新知 / 加QQ群 【1012423279】获取商家优惠推送