Zblog二级目录的robots.txt写法
写好zblog的robots.txt文件对网站至关重要,可以通过写robots.txt来屏蔽不需要抓取的页面,从而提高收录质量。而zblog源文件默认是没有Robots.txt这个文件的,所以我们应该手工创建robots.txt文件, 通过robots.txt语法禁止搜索引擎收录一些不必要的页面,以“清洁”收录,提高质量。
Zblog二级目录的robots写法,同时适用于根目录(一级目录),但是自己要根据实际情况做出相应调整。 如无视收录、权重等问题请绕过此文。
User-agent:*
Disallow:/ADMIN/ (管理员登陆目录)
Disallow:/SCRIPT/ (脚本)
Disallow:/PLUGIN/ (插件目录)
Disallow:/FUNCTION/ (函数)
Disallow:/UPDATE/ (Zblog官方升级信息)
Disallow:/UPLOAD/ (上传的文件或图片,这里按需要进行屏蔽)
Disallow:/ARTICLE-IMAGE/ (禁用网站模板中用到的一些小图标)
Disallow:/DATA/ (数据库)
Disallow:/CACHE/ (缓存)
Disallow:/STYLE/ (CSS目录)
Disallow:/TEMPLATE/ (模板目录)
Disallow:/CSS/ (CSS文件)
Disallow:/LANGUAGE/ (语言文件)
Disallow:/login.asp (登陆后台)
Disallow:/c_custom.asp (不需要抓取)
Disallow:/c_option.asp (不需要抓取)
Disallow:/cmd.asp? (不需要抓取)
Disallow:/search.asp (站内搜索)
Disallow:/atom.xml (不需要抓取)
Disallow:/rss.xml (不需要抓取)
Disallow:/vIEw.asp? (不需要抓取)
Disallow: /*?* (禁止带有?的动态地址,按需要进行屏蔽)
Sitemap:http://www你的域名com/sitemap.xml (这里并不是屏蔽,而是告诉搜索引擎,这里有网站地图地址)
减肥水果网 2017-03-12 11:26:00 回复
学习了,正好需要,减肥水果网 2017-01-25 19:42:26 回复
学习了,正好需要,