稍微接触过 SEO 的小伙伴们都应该知道 robots 协议（也称为爬虫协议、爬虫规则、机器人协议等），也就是通常添加到网站根目录的 robots.txt 文件，它的作用在于告诉搜索引擎哪些页面可以抓取，哪些页面不能抓取，从而优化网站的收录结果和权重。
如果你的网站根目录还没有 robots.txt，你可以创建一个。下面是一个基本的 WordPress 的 robots 协议：
User-agent: * Disallow: /feed/ Disallow: /trackback/ Disallow: /wp-admin/ Disallow: /wp-content/ Disallow: /wp-includes/ Disallow: /xmlrpc.php Disallow: /wp- Allow: /wp-content/uploads/ Sitemap: http://example.com/sitemap.xml
可根据自己的需要进行修改，其中 sitemap 指的是网站地图的地址，如果你的网站没有网站地图，最后一行可删除。
好了，WordPress 为站点添加 robots.txt 就分享到这里，非常感谢你的来访。如果你很喜欢本站，请不要忘记收藏本站，以便下次继续访问；也可以 关注站长微博 随时获取最新动态。你的支持就是我最大的动力！
转载请注明：爱维科斯 » WordPress 为站点添加 robots.txt
赏 
支付宝打赏 
微信打赏
支付宝打赏 微信打赏 如果文章对你有帮助，欢迎点击上方按钮打赏作者