Wordpress丨robots.txt的用处

Wordpress丨robots.txt的用处,第1张

WordPress网站可以用robots.txt文件进行主题站的优化,大家可以通过下面的介绍方法再来根据自己搭建的主题站进行设定: 

Wordpress丨robots.txt的用处,第2张

 
以下就举具体例子:
 
User-agent: *

Disallow: /wp-

Disallow: /?

Disallow: /feed/

Disallow: /*/feed/

Disallow: /trackback/

Disallow: /*/trackback/

Disallow: /page/

Disallow: /a-category/*/page/

Disallow: /a-tag/*/page/

Sitemap: http://你的主题站域名/sitemap.xml

 
复制
下面详细解释下每行规则的含义:
 
User-agent: * 对所有搜索引擎开放收录

Disallow: /wp- 禁止搜索引擎收录所有包含“wp-”字样的url,如wp-admin、wp-content、wp-includes、wp-login.php等

Disallow: /? 禁止搜索引擎收录所有包含“?”字样的url

Disallow: /feed/ 禁止搜索引擎收录RSS订阅页面

Disallow: /*/feed/ 禁止搜索引擎收录所有分类目录、TAG、文章的RSS订阅

Disallow: /trackback/ 禁止收录网站的trackback

Disallow: /*/trackback/ 禁止收录所有分类目录、TAG、文章的trackback

Disallow: /page/ 禁止百度收录首页分页,防止首页权重过于分散

Disallow: /a-category/*/page/ 同理,禁止百度收录分类目录分页

Disallow: /a-tag/*/page/ 同理,禁止百度收录TAG标签分页

Sitemap: http://你的主题站域名/sitemap.xml robots.txt文件增加Sitemap链接地址
DABAN RP主题是一个优秀的主题,极致后台体验,无插件,集成会员系统
网站模板库 » Wordpress丨robots.txt的用处

0条评论

发表评论

提供最优质的资源集合

立即查看 了解详情