WordPress SEO教程：Robots.txt文件

Robots.txt的完整编写方法解释如下：

1. Disallow: /wp-admin/、Disallow: /inc/ 和 Disallow: /other/
用于指定搜索。该工具不在程序文件页面的后台运行。

2。 Disallow: page/ 和 Disallow: /tag trackback
禁止搜索引擎抓取和嵌入 Trackback 及其他垃圾信息

3.禁止：/feed、禁止：?s=*\
禁用搜索 该工具扫描第

4 页上的搜索结果。禁止：/attachment/
禁止搜索引擎抓取带有附件的页面，例如无意义的图像附件页面。

WordPress站点上完整的robots.txt文件内容如下：

User-agent: *
Disallow: /wp-admin/
Disallow: /inc/
Disallow: /other/
Disallow: page/
Disallow: /tag trackback
Disallow: /feed
Disallow: ?s=*\
Disallow: /attachment/
Sitemap: http://www.thefox.cn/sitemap.xml

具体使用时，将sitemap替换为你的sitemap的完整地址！