wordpress程序robots文件写法大全

很多小伙伴问我,搜索引擎又收录了很多他不想让搜索引擎收录的页面,怎么办?其实这个问题是可以杜绝的,不过前提是写好robots文件,由于wordpress的功能还是很多的,这样会生成五花八门的路径形式,怎么禁止呢?想了解的小伙伴就往下看吧~

wordpress程序robots文件写法大全

User-agent: * //设置robots规则适用的浏览者身份为全部UA身份

Disallow: /*?* //屏蔽掉页面中的动态路径

Disallow: /?p=* //屏蔽掉非固定链接的文章页面路径,因为每个页面中都会有一个shortlink使用的是?p= 的路径。

Disallow: /index.php //屏蔽掉首页默认页面的index.php 页面地址

Disallow: /wp-admin //屏蔽掉后台登陆页面地址,主要是考虑到服务器安全

Disallow: /wp-content/plugins //屏蔽掉wordpress的插件目录

Disallow: /wp-content/themes //屏蔽掉wordpress的模板目录

Disallow: /wp-includes //屏蔽掉wordpress的底层程序目录

Disallow: /trackback //屏蔽wordpress的页面回评路径

Disallow: /*/*/trackback //屏蔽wordpress分类目录、文章页面的回评路径

Disallow: /feed //屏蔽wordpress的内容订阅路径

Disallow: /*/*/feed //屏蔽wordpress分类目录、文章页面的订阅路径

Disallow: /comments/feed //屏幕wordpress评论的订阅路径

Disallow: /page/ //屏蔽默认的翻页路径

Disallow: /*/*/page/ //屏蔽分类目录的翻页路径

Disallow: /page/1$ //屏蔽翻页路径中的数字路径

Disallow: /tag/ //屏蔽标签页面

Disallow: /?s=* //屏蔽搜索结果路径,主要是避免搜索结果的缓存被搜索引擎收录

Disallow: /?r=*

Disallow: /*/comment-page-*

Disallow: /*?replytocom*

Disallow: /date/ //屏蔽按日期分类显示的列表页面

Disallow: /author/ //屏蔽作者文章列表页面

Disallow: /category/ //屏蔽以category为起始路径的分类路径,如果您没有使用插件生成不带category前缀的路径时,请不要使用此项规则。

Disallow: /?p=*&preview=true

Disallow: /?page_id=*&preview=true

Disallow: /wp-login.php //屏蔽后台登陆页面

Sitemap: http://www.coffeebk.com/sitemap.xml //引导蜘蛛爬取网站地图

Sitemap: http://www.coffeebk.com/sitemap_baidu.xml //引导百度蜘蛛爬取网站地图

以上就是今天厦门seo的小编为大家带来的wordpress程序robots文件写法大全,希望对大家有帮助,喜欢的小伙伴就点个赞吧~

您可以选择一种方式赞助本站

发表评论

:?: :razz: :sad: :evil: :!: :smile: :oops: :grin: :eek: :shock: :???: :cool: :lol: :mad: :twisted: :roll: :wink: :idea: :arrow: :neutral: :cry: :mrgreen: