华为爬虫不遵守协议高频抓爬如DDoS攻击

maro666 · 发表于 2020-5-11 19:08:27

几大流氓爬虫头条的和华为的直接能把你网站爬死和CC攻击差不多了

b66667777 · 发表于 2020-5-11 22:47:26

吃瓜预订

tir · 发表于 2020-5-11 19:09:42

直接屏蔽就行了，小问题

openos · 发表于 2020-5-11 19:09:57

上次Google把我的网站爬挂了!
比CC还厉害的多

chitycheng · 发表于 2020-5-11 19:10:40

爬虫跟蜘蛛又区别吗？

Venkio · 发表于 2020-5-13 09:10:00

我每天一发布文章爬虫就开始爬然后CPU内存飙升过几分钟那篇文章被收录了以后就好了

loukky · 发表于 2020-5-11 21:46:00

我直接ban了化为的asn

额头有王的喵 · 发表于 2020-5-11 19:16:47

华为爬虫充分显示国内企业的行为

a141420maro666 · 发表于 2020-5-11 19:22:17

为所欲也几大流氓爬虫头条的和华为的直接能把你网站爬死和CC攻击差不多了

iks · 发表于 2020-5-11 19:30:53

maro666 发表于 2020-5-11 22:47

几大流氓爬虫头条的和华为的直接能把你网站爬死和CC攻击差不多了
头条的已经被我全线 ban 了，华为的倒没注意，正在加入全部站点 ban UA 列表