有很多分析网站导致不知名的爬虫有很多，这些垃圾蜘蛛频繁抓取我们的网站，对服务器压力大，特别是服务器配置不高的情况下，那么如何屏蔽这些垃圾蜘蛛减轻服务器压力呢?   一般来说，屏蔽蜘蛛抓取有三...