更新8.7.3版nginx防火墙后,小白发现多了一个“非浏览器拦截”。宝塔官网对此功能只说明了建议开启此功能,拦截非浏览器请求,此开关将应用所有网站(建议开)。但是小白实测开启后会拦截部分蜘蛛。小编赵一八笔记(www.fuwuqidl.com)目前罗列下今天被拦截的几个蜘蛛。其中一大票都是真的蜘蛛。虽然他们的UA确实比较奇怪。
1、106.11.159.74、106.11.153.36、106.11.159.81、106.11.155.37、106.11.153.34
被拦截useragent:Mozilla/5.0 (iPhone; U; CPU iPhone OS 10_3_1 like Mac OS X; en-us) AppleWebKit/532.9 (KHTML, like Gecko) Version/4.0.5 Mobile/8A293 Safari/6531.22.7
反查IP:shenmaspider-106-11-159-74.crawl.sm.cn
虽然使用了阿里云服务器IP,AS37963。但是人家是真真正正的神马搜索蜘蛛。
2、111.202.101.82、111.202.101.18
被拦截useragent:Mozilla/5.0 (Windows NT 6.1; WOW64; rv:51.0) Gecko/20100101 Firefox/51.0
反查IP:sogouspider-111-202-101-82.crawl.sogou.com
搜狗蜘蛛,使用了奇怪useragent。
3、42.156.254.20
被拦截useragent:Mozilla/5.0 (iPhone; U; CPU iPhone OS 10_3_1 like Mac OS X; en-us) AppleWebKit/532.9 (KHTML, like Gecko) Version/4.0.5 Mobile/8A293 Safari/6531.22.7
反查IP:shenmaspider-42-156-254-20.crawl.sm.cn
神马蜘蛛,奇怪IP。
4、49.7.21.113、49.7.21.104
被拦截useragent:Mozilla/5.0 (Windows NT 6.1; WOW64; rv:51.0) Gecko/20100101 Firefox/51.0
反查IP:sogouspider-49-7-21-113.crawl.sogou.com
搜狗蜘蛛奇怪UA。
5、123.183.224.158
被拦截useragent:Mozilla/5.0 (Windows NT 6.1; WOW64; rv:51.0) Gecko/20100101 Firefox/51.0
反查IP:sogouspider-123-183-224-158.crawl.sogou.com
搜狗蜘蛛奇怪UA。
赵一八笔记点评,目前宝塔的nginx防火墙。非浏览器识别会拦截部分搜狗和神马的蜘蛛。如果你比较在乎这两个搜索引擎。建议关闭这个功能。误报率挺高。当然也有一部分因素是搜索引擎自身使用了比较奇怪的UA。
目前百度和谷歌系列的蜘蛛并没有被宝塔非浏览器拦截。所以说还是比较好用的。
如果你想体验下宝塔nginx防火墙,可以点击领取宝塔3188元代金券(https://www.bt.cn/?invite_code=MV9wZmViZHM=)。券后0.99元体验专业版。专业版免费使用所有专业版插件,包含nginx防火墙。抵扣券可用于专业版、企业版、插件、月付、年付、永久。
联系客服