V2EX = way to explore
V2EX 是一个关于分享和探索的地方
Sign Up Now
For Existing Member Sign In
推荐书目
› 高性能网站建设进阶指南
› High Performance Web Sites
› Google Hacks: Tips & Tools for Finding and Using the World's Information
关于 Google SEO 最好的一本书
› High Performance Web Sites
› Google Hacks: Tips & Tools for Finding and Using the World's Information
关于 Google SEO 最好的一本书
This topic created in 422 days ago, the information mentioned may be changed or developed.
现在有很多自动变换 user-agent 的爬虫，每次访问页面都会换一次 ua ，怎么才能把他们自动拉黑呢，这些爬虫把服务器带宽都占满了
13 replies • 2025-03-04 09:37:24 +08:00
 |
1
hubaq Mar 3, 2025
V2：上 CF
|
 |
2
Hookery Mar 3, 2025
这种情况找到对方可以走法律途径起诉。前提是能找到。
|
 |
3
deplives Mar 3, 2025
换个思路，套一个 cf 吧
|
 |
5
blackeeper Mar 3, 2025
ua 变化，IP 又不会变化，根据 IP 来做策略就可以了
|
 |
6
voidcomma Mar 3, 2025
上 recapture （…
|
 |
7
h175h32 OP @blackeeper 难就难在 怎么判断他是有多个 ua
|
 |
8
sslyxhz Mar 3, 2025
ip 策略，登录限制
|
 |
9
Lshl56B4vDqdixwK Mar 3, 2025
看看有什么特征吧，爬虫一般用的是 http 1.1 ，干脆把所有 http 1.1 除搜索引擎爬虫的请求全部验证码质询。
|
 |
10
herozzm Mar 4, 2025 via iPhone
ua 和 ip 都会变就无解，上验证码
|
 |
11
zeusho871 Mar 4, 2025
基于 tls 指纹可以拦截一部分，然后麻烦的需要用 ip 加行为风控
|
 |
12
Dragonish3600 Mar 4, 2025
直接屏蔽所有云厂商的 CIDR
|
Select Language