代理池作用大妈

V2EX = way to explore

V2EX 是一个关于分享和探索的地方

现在注册

已注册用户请登录

推荐学习书目

› Learn Python the Hard Way

Python Sites

› PyPI - Python Package Index

› http://diveintopython.org/toc/index.html

› Pocoo

值得关注的项目

› PyPy

› Celery

› Jinja2

› Read the Docs

› gevent

› pyenv

› virtualenv

› Stackless Python

› Beautiful Soup

› 结巴中文分词

› Green Unicorn

› Sentry

› Shovel

› Pyflakes

› pytest

Python 编程

› pep8 Checker

Styles

› PEP 8

› Google Python Style Guide

› Code Style from The Hitchhiker's Guide

这是一个创建于 1845 天前的主题，其中的信息可能已经有所发展或是发生改变。

请问下，现在爬虫建代理池作用还大吗？
现在很多网站，像 taobao，要注册账号才能登陆访问，一旦账号 ip 变了又要手机短信验证码。。。
这种情况下，好像除了多注册几个账号。。。完全没有办法。

账号

代理

taobao

7 条回复 • 2019-08-02 15:23:47 +08:00

whatsmyip

2019-03-31 21:43:31 +08:00

拼到最后，还是在拼 IP

只不过淘宝的屏蔽太严了，连自己的机房都屏蔽（需要验证码）了。

拿到真实 ip + 人工养一养可能会好点

keysona

2019-03-31 22:55:50 +08:00

淘宝是太丧心病狂了，我这里的民用宽带每天都会变 ip，所以看淘宝每天都要登录一次....

gowk

2019-03-31 23:06:17 +08:00 via Android

作用很大爷

glacer

2019-04-01 11:05:14 +08:00

整体来说，代理池的作用很大。
但单单对淘宝来说，代理池作用有限，淘宝的反爬虫机制很强，代理池仅仅是能起到一点作用而已。

LicV587

2019-04-01 15:37:39 +08:00

垃圾淘宝，搜商品还必须登录

wdcrgb

2019-04-03 13:42:38 +08:00

还是大的大爷那种~~
打个广告 https://github.com/wdcrgb/proxypool

dabaibai

2019-08-02 15:23:47 +08:00

@glacer 自己从网上抓免费代理的话...不知道可用性到底有多大.