Preload Bot是什么蜘蛛？有用吗？需要屏蔽吗？

Preload Bot是什么蜘蛛？相信有很多人都不太清楚吧，可能大家也没能遇到过。不过最近悦然网络工作室就遇到了，如上图所示，Preload Bot这个蜘蛛的抓取还是比较频繁的，仅次于百度搜索蜘蛛。

那么Preload Bot到底是什么蜘蛛呢，它是正规的搜索引擎蜘蛛吗？刚开始悦然网络工作室也不是很明白，百度和谷歌搜索也没有找到很确切的答案，直到我回忆起最近在安装过的插件才反应过来，Preload Bot可能是某些插件的“蜘蛛”，而这个蜘蛛正是大名鼎鼎的wp rocket缓存加载插件的。因为悦然网络工作室官网是使用wordpress建站开发的，因为给网站加速，之前就尝试过wp rocket插件。

Preload翻译过来就是预装、预载的意思，而wp rocket插件中有一个预加载功能，所以Preload Bot应该就是wp rocket插件的一个预加载程序，只要我们开启或开户过这个功能，那么wp rocket插件服务商的Preload Bot程序就会自动来抓取我们的网站内容。

中文版的wp rocket插件大家可能看不出来，把它成老一点的英文版，切换到Preload选项中，就可以看到里面有一个Preload Bot选项，所以现在基本可以确定Preload Bot就是wp rocket插件的一个爬虫程序了，开启过后它就会自动来抓取我们的网站内容，然后缓存，可以在一定程度上提升网站打开速度。

如果你正在使用wp rocket插件这款插件，那么不用管它，因为它对我们的网站没什么影响。

如果你不准备使用wp rocket插件了，那么可双先关闭预加载功能，然后再禁用、删除插件。

另外我们也可以尝试在robots.txt文件中禁止Preload Bot，把下面的内容添加到robotx.txt文件中即可。

User-agent: Preload Bot
Disallow: /

小结：理论来讲，Preload Bot蜘蛛应该是只会再现在wordpress建站环境中，而且是使用过wp rocket插件的站点中，一般没有必要管它。