快速排名
七天上首页

wordpress网站中sitemap与robots.txt文件生成设置

首先网站的站点地图(sitemap)的制作生成,本文主要讨论wordpress 系统搭建的网站。

1、用的人最多是用word press插件来生成,如yoast SEO插件,在管理后台,点插件项目,搜索 yoast,5百万+的下载激活,安装 yoast激活启用后,会多一个SEO项目,选择常规,点击特点中,打开 xml站点地图开关即可。

2、也可用自己写php代码来生成 wordpress站的站点地图,需要你有一定的编码能力,自己生成sitemap.xml文件。

3、robots.txt文件,wordpress网站,只要在浏览器输入 域名/robots.txt就可以看到内容,默认内容为

User-agent: *
Disallow: /wp-admin/
Allow: /wp-admin/admin-ajax.php

解释一下含义:
Disallow: /wp-admin/,意思是包含这个路径的url不要爬取。
Allow: /wp-admin/admin-ajax.php ,表示这个页面可以爬取。
表达的意思是告诉搜索引擎不要抓取后台程序文件页面 。

这只是一个基本的robots.txt文件,较完整的可以这样写:

User-agent: *
Disallow: /wp-admin/
Disallow: /wp-content/
Disallow: /wp-includes/
Disallow: /*/comment-page-*
Disallow: /*?replytocom=*
Disallow: /category/*/page/
Disallow: /tag/*/page/
Disallow: /*/trackback
Disallow: /feed
Disallow: /*/feed
Disallow: /comments/feed
Disallow: /?s=*
Disallow: /*/?s=*\
Disallow: /*?*
Disallow: /attachment/ 

如果要写robots.txt文件,也要谨慎,不要误将搜索引擎爬虫给排除啦。

赞(174)
未经允许不得转载:ido SEO » wordpress网站中sitemap与robots.txt文件生成设置

快速排名,七天上首页,万词霸屏

QQ咨询电话咨询