V2EX › xtpitt 的所有回复 › 第 1 页 / 共 1 页

V2EX = way to explore

V2EX 是一个关于分享和探索的地方

现在注册

已注册用户请登录

2019-12-16 13:41:22 +08:00

回复了 xtpitt 创建的主题 › Python › 爬虫绕不开代理，免费的可用率低，付费的过期时间往往又不确定。如何校验也是问题。造了个轮子，欢迎拍砖~

@locoz 刚刚附言中回答了下你所说的问题，是有做策略的

2019-12-16 13:05:00 +08:00

回复了 xtpitt 创建的主题 › Python › 爬虫绕不开代理，免费的可用率低，付费的过期时间往往又不确定。如何校验也是问题。造了个轮子，欢迎拍砖~

@lc7029 算上端口，数量还是挺多的。虽然代理的端口一般都用那几个。

2019-12-16 10:03:07 +08:00

回复了 xtpitt 创建的主题 › Python › 爬虫绕不开代理，免费的可用率低，付费的过期时间往往又不确定。如何校验也是问题。造了个轮子，欢迎拍砖~

@392039757 中小型项目还是可以玩玩的，毕竟还有很多公司不舍得买代理。开着校验和多倍转发，我在个人项目用着成功率很高。

2019-12-16 01:16:29 +08:00

回复了 xtpitt 创建的主题 › Python › 爬虫绕不开代理，免费的可用率低，付费的过期时间往往又不确定。如何校验也是问题。造了个轮子，欢迎拍砖~

@locoz 看过大佬的社区，明天去转发一下
1. 多倍转发特性主要是针对免费代理的，目的是快速过滤掉一些广告代理和低质代理，方式确实有点类似的多倍发包，哈哈哈。付费代理的话，我之前用过的某麻代理等，都说明 15 分钟有效，但测试下来，过期时间确实不稳定。
2. 主要想推广 response 校验的特性，在别的代理项目中，暂时还没发现实现这个功能的~