开发者社区> 问答> 正文

快被YisouSpider搞瘫痪

快被YisouSpider 搞瘫痪 大家都禁止了吧!一天抓取十几万次…… 宽带资源全部被占用 不给代来 一个访客

展开
收起
hebeii 2014-10-12 11:10:36 8032 0
15 条回答
写回答
取消 提交回答
  • Re快被YisouSpider搞瘫痪
    宜搜的确实很恶心
    2014-10-24 09:48:57
    赞同 展开评论 打赏
  • 你懂得
    2014-10-23 12:15:54
    赞同 展开评论 打赏
  • 欢迎进行技术分享,感谢你的支持!
    2014-10-23 11:40:48
    赞同 展开评论 打赏
  • Re快被YisouSpider搞瘫痪
    偶尔也会有些神马过来的ip
    2014-10-15 16:00:28
    赞同 展开评论 打赏
  • 我网站,神马搜索还是能进来IP的。。
    2014-10-14 19:12:52
    赞同 展开评论 打赏
  • 抓那么多次倒没问题,问题是他们发起的连接总是不自己close,导致很多close_wait
    2014-10-14 18:09:41
    赞同 展开评论 打赏
  • 神马搜索的吧。有时能带来十几个IP
    2014-10-14 15:50:44
    赞同 展开评论 打赏
  • Re快被YisouSpider搞瘫痪
    还好我没用。。
    2014-10-13 11:35:32
    赞同 展开评论 打赏
  • 幸亏没用啊
    2014-10-12 22:24:25
    赞同 展开评论 打赏
  •     User-agent: YisouSpider
        Disallow: /
    2014-10-12 19:38:18
    赞同 展开评论 打赏
  • 我也是被害者之一,已经禁掉了。
    2014-10-12 19:31:43
    赞同 展开评论 打赏
  • 大家还记得我么。
    2014-10-12 18:33:13
    赞同 展开评论 打赏
  • www.aliyun.net.cn
    2014-10-12 14:33:42
    赞同 展开评论 打赏
  • 回3楼hebeii的帖子
    楼上你用什么工具看蜘蛛抓取频次的?
    2014-10-12 14:06:32
    赞同 展开评论 打赏
  • Re快被YisouSpider搞瘫痪
    是“神马搜索” 也就是UC 的蜘蛛   我看到有的站长在UC论坛投诉  直接被无视  ,无视robots.txt  无脑抓取  非常恶心!!!

    -------------------------

    Re快被YisouSpider搞瘫痪
    2014-10-12 11:18:26
    赞同 展开评论 打赏
滑动查看更多
问答地址:
问答排行榜
最热
最新

相关电子书

更多
代码未写,漏洞已出——谈谈设计不当导致的安全问题 立即下载
打击网络黑产浅见分享 立即下载
让世界没有陌生的角落 共享单车时代的快与慢 立即下载