如何阻止搜索引擎抓取WordPress站点

King| 2015-02-05 WordPress, 教程, 评论数( 0 )

在许多情况下,人们不希望自己的网站被搜索引擎抓取并显示在搜索结果中,但是搜索引擎可以通过许多方式来抓取,索引你的网站,即使你不提供公开的域名;所以许多用户迫切地寻找阻止搜索引擎抓取,索引他们的WordPress站点的方法。我们将通过这篇文章跟大家分享一下解决这个需求的方法。

阻止搜索引擎抓取,索引你的网站

有一种方法是通过WordPress自带的功能来阻止网站被抓去。打开主菜单“设置”目录下的“阅读”选项,会出现以下界面,你会发现在最下方有一个对搜索引擎可见性的选项,需要我们做的就是点击“建议搜索引擎不索引本站点”选项旁边的方框进行勾选。最后保存更改。

如何阻止搜索引擎抓取WordPress站点

这时WordPress将自动地把下面的代码加到网站源代码的header中:

<meta name="robots" content="noindex,follow" /> 同时还会创建网站的robots.TXT文件,将以下代码写入该文件。

1 User-agent: * 2 Disallow: /

这个代码的作用是阻止网络爬虫对你的网页进行索引。但是还取决于搜索引擎是否接受这个指令。所以,虽然大多数搜索引擎会尊重这个请求,但还是不能确保一些网页或随机图片不被索引。

如何确保网站不会出现在搜索结果中

接下来给大家介绍一种最有效而且很简单的方法,那就是设置服务器密码来保护WordPress网站不被搜索引擎索引。密码设置成功后,如果有人想要访问你的网站或者是登陆WordPress时,都会被要求提供用户名及密码,包括搜索引擎的访问。如果登陆失败将会在访问者网页上显示401error的错误信号。接下来给大家讲解如何设置服务器密码。

用cPanel来实现对网站进行密码保护

如果你的WordPress主机提供商提供了管理主机的cPanel权限,你就可以通过cPanel来保护你的网站。登陆cPanel仪表盘,如下图。

如何阻止搜索引擎抓取WordPress站点

单击password protect Directories,进入如下界面。

如何阻止搜索引擎抓取WordPress站点

在这里你需要选择一个需要的document root。然后单击“Go”按钮,进入下一个界面,如下图。

如何阻止搜索引擎抓取WordPress站点

首先我们需要为protected directory进行命名,并保存。保存成功后会有提示,点击go back 链接回到刚才的界面。最后在Create Users中创建用户名和密码,然后提交。这样就实现了对网站的密码保护,当然,也不会有搜索引擎可以爬取到你的网站了。

这就是我们要给您介绍的全部内容,希望对您有所帮助,谢谢!

聚焦云计算,扫描二维码,关注HostUCan云计算

有好的文章希望站长之间帮助分享推广,猛戳这里我要投稿

您需要登录后才可以评论登录|注冊

暂无评论