屏蔽不遵循 robots 协议的搜索引擎蜘蛛抓取网站页面的插件-Blackhole for Bad Bots

Wp插件  屏蔽不遵循 robots 协议的搜索引擎蜘蛛抓取网站页面的插件-Blackhole for Bad Bots
Blackhole for Bad Bots
插件用来禁止不遵循 robots 协议的搜索引擎抓取我们不想让他们抓去的内容。该插件的原理是,在 robots.txt 文件中增加一个链接地址,一旦有蜘蛛试图访问这和链接,这个蜘蛛就被禁止访问网站中的其他页面,遵循 robots 协议的蜘蛛自然不会去访问这个链接,可以正常抓取网站允许搜索引擎收录的页面。正常用户看不到这个隐藏的链接,遵循 robots 协议的搜索引擎也不受影响。

功能特色

  • 设置简便
  • 代码干净
  • 基于 WordPress API 开发
  • 功能简单专一,不啰嗦
  • 轻量级、高性能、高灵活性
  • 可以很方便地重置屏蔽的蜘蛛列表
  • 可以删除单个被屏蔽的蜘蛛
  • 插件通过设置页面设置,不给后台增加
  • 安静的在后台工作,不会影响正常用户的访问
  • Optionally receive an email alert with WHOIS lookup for blocked bots
  • 所有主流搜索引擎已被加入白名单,不会被屏蔽
  • 自定义显示给被屏蔽的搜索引擎的消息
  • 一键重置插件设置

 

白名单

默认情况不封锁以下任何一个主流搜索引擎,下面的搜索引擎默认被添加到了插件的白名单中,插件允许在设置中手动添加其他搜索引擎到白名单。

  • AOL.com
  • Baidu
  • Bingbot/MSN
  • DuckDuckGo
  • Googlebot
  • Teoma
  • Yahoo!
  • Yandex

如果你的网站不是基于 WordPress 构建的,也可以使用该插件的 PHP 版本
安装,wordpress后台插件搜索安装。

内容投诉
「点点赞赏,手留余香」

    还没有人赞赏,快来当第一个赞赏的人吧!
0 条回复 A 作者 M 管理员
    所有的伟大,都源于一个勇敢的开始!
欢迎您,新朋友,感谢参与互动!欢迎您 {{author}},您在本站有{{commentsCount}}条评论
'); })();