某搜索爬虫不遵守协议高频抓爬如 DDoS 攻击让国内外许多网站痛苦不堪

V2EX = way to explore

V2EX 是一个关于分享和探索的地方

For Existing Member Sign In

This topic created in 2177 days ago, the information mentioned may be changed or developed.

消息来自蓝点网大佬们网站日志有这个爬虫记录吗 https://www.landiannews.com/archives/73796.html

5 replies • 2020-05-13 11:10:59 +08:00

coolwo

May 12, 2020

好牛的 spider，在为 300 年以后的“哄-蒙系统”爬数据了，6666~

no1xsyzy

May 12, 2020

惊了，我还以为是旧闻，刚想致

ruzztok

May 12, 2020

直接给它禁了

id7368

PRO

May 13, 2020

@no1xsyzy 查了下似乎从 2 月才开始爬的。

no1xsyzy

May 13, 2020

@id7368 #4 （我是说，我还以为还是头条搜索……