首页   注册   登录

NullMan

V2EX 第 172115 号会员,加入于 2016-05-07 22:06:41 +08:00
NullMan 最近回复了
很赞!比 kcptun 好用,已切换成 nysocks 了.
@wxsm 淡定,这是刚入行的拙劣小“猎头”。
@weakish 哈哈,这评论来得及时!
我反正把它举报了,就看是否会被撤下。
@cqcn1991 p2p 版的分布式爬虫可要比传统的分布式爬虫厉害多了,至少不用花钱,而且人数越多,越不可能会出现与之对抗的反爬虫手段。
我有个大胆的想法,实现一个 p2p 的爬虫代理。比如你想爬 amazon,那么就通过 p2p 网络,让 p2p 爬虫代理 A 帮助你爬 amazon 1 页面,p2p 爬虫代理 B 帮你爬 amazon 2 页面。

只要参与了这个 p2p 爬虫网络的人,都可以互相彼此代理爬取,这样就实现了分布式爬虫的效果。

你为人人,人人为用,这就是 p2p 的精神。
这程序能做什么能盈利的用途?
关于   ·   FAQ   ·   API   ·   我们的愿景   ·   广告投放   ·   鸣谢   ·   1868 人在线   最高记录 3541   ·  
创意工作者们的社区
World is powered by solitude
VERSION: 3.9.8.1 · 7ms · UTC 05:56 · PVG 13:56 · LAX 22:56 · JFK 01:56
♥ Do have faith in what you're doing.
沪ICP备16043287号-1