如果你不知道 robots.txt 是什么,也不确定如何正确地设置它,本篇文章会向您介绍适用于子比主题的 robots.txt 文件,利用它可以提升 SEO 的效果,避免收录无关页面,从而解决网站被收录但无权重的困境。
作为一款高效的 SEO 工具,robots.txt 通过在网站上设置它,来告诉搜索引擎哪些页面可以被抓取,哪些页面不应该抓取。有了 robots.txt,您可以更好地控制自己网站的内容,避免遭受不必要的搜索引擎扫描。
现在,我们向大家推荐的是适用于子比主题的一个适合的 robots.txt 文件设置。这里分享给大家,希望对您有所帮助:
上述代码对应的内容规则如下:
- User-agent: *:表示对所有的搜索引擎生效,针对所有爬虫。
- Disallow: /license.txt 和 Disallow: /readme.html:禁止抓取 license.txt 与 readme.html 页面,避免被搜索引擎认为您的页面带有敏感信息。
- Disallow: /wp-admin/、Disallow: /wp-includes/、Disallow: /xmlrpc.php、Disallow: /wp-json/:禁止搜索引擎索引 WordPress 后台等相关页面。
- Disallow: */comments/:禁止搜索引擎查找评论页面,避免无意义数据被索引。
- Disallow: */trackback/:禁止搜索引擎查找 Trackback 页面,同样可以避免无用数据的索引。
- Disallow: *?s=和 Disallow: *?amp:禁止搜索引擎查找 URL 带有特定字词的页面。
- Disallow: /wp-content/plugins/和Disallow: /wp-content/themes/:禁止搜索引擎索引 WordPress 插件和主题。
在上述设置中,sitemap.xml 文件作为一个索引文件,可以有效地推送包含重要页面的网站地图,帮助搜索引擎了解您网站的结构,进一步提升网站的 SEO 效果。
希望以上代码能为您的 SEO 工作提供帮助。如有需要,请根据实际情况进行适当的修改,以达到最好的 SEO 优化效果。
© 版权声明
本站网络名称:
玖零笔记
本站永久网址:
https://7490.cn
网站侵权说明:
本网站的文章部分内容可能来源于网络,仅供大家学习与参考,如有侵权,请联系站长QQ1622383724删除处理。
1 本站一切资源不代表本站立场,并不代表本站赞同其观点和对其真实性负责。
2 本站一律禁止以任何方式发布或转载任何违法的相关信息,访客发现请向站长举报
3 本站资源大多存储在云盘,如发现链接失效,请联系我们我们会第一时间更新。
1 本站一切资源不代表本站立场,并不代表本站赞同其观点和对其真实性负责。
2 本站一律禁止以任何方式发布或转载任何违法的相关信息,访客发现请向站长举报
3 本站资源大多存储在云盘,如发现链接失效,请联系我们我们会第一时间更新。
THE END
- 最新
- 最热
只看作者