V2EX › U87 的所有回复 › 第 4 页 / 共 5 页

V2EX = way to explore

V2EX 是一个关于分享和探索的地方

现在注册

已注册用户请登录

1 2 3 4 5

❮

❯

2018-07-17 11:44:03 +08:00

回复了 U87 创建的主题 › 问与答 › Python 有个小问题想请教下

@hlwjia 好的下回知道,这种是查文档方便

2018-07-17 11:39:17 +08:00

回复了 U87 创建的主题 › 问与答 › Python 有个小问题想请教下

@wqzjk393 time data "Mon Jul 09 17:35:26 +0800 2018" dose not match format "xxxxxxxx"

2018-07-17 11:19:07 +08:00

回复了 U87 创建的主题 › 问与答 › Python 有个小问题想请教下

@hlwjia 就查百度啊

2018-07-17 10:55:03 +08:00

回复了 U87 创建的主题 › 问与答 › Python 有个小问题想请教下

@blankme 阿白真的很严格,2333

2018-06-25 13:52:24 +08:00

回复了 linhanqiu 创建的主题 › Python › 做爬虫做久了感觉都要学学安全方面的东西了，比如接口破签， app 脱壳，唉。。。。。

@linhanqiu 爬虫使用代理时,公司提供了快代理收费接口,我这边直接拿到接口返回的那些 addres 和 port,然后做了个简单的判断,就是遍历拿到的代理 ip 列表访问个 http 的网站,返回 200 的我就取,然后就去实现我的爬虫(response = requests.get(url=url, headers=random.choice(self.headers), proxies=random.choice(proxy_list), timeout=10)),随机获取验证过的 ip,然后再请求.但是这样好像不行.都是这种报错 HTTPConnectionPool,请问前辈是哪里的问题

2018-06-24 22:23:44 +08:00

回复了 linhanqiu 创建的主题 › Python › 做爬虫做久了感觉都要学学安全方面的东西了，比如接口破签， app 脱壳，唉。。。。。

@linhanqiu 兄弟，能问个东西吗

2018-06-19 20:24:34 +08:00

回复了 U87 创建的主题 › 问与答 › Python 爬虫 ip 被封,公司给了个付费快代理接口,我先验证付费接口 ip 的可用性,然后拿来爬目标网站,还是出现

还是出现 requests.exceptions.ProxyError 难道是在验证和爬目标网站这时间之间 ip 失效了?

2018-04-26 17:29:21 +08:00

回复了 U87 创建的主题 › 问与答 › Python 字典来算一个字符在一个段落出现的次数，出现了报错。实在没找到原因 QAQ

@whoami9894 谢谢我 sb 了

2018-04-24 13:22:22 +08:00

回复了 U87 创建的主题 › 问与答 › 原谅我这个伸手党

@leopku 尼玛。。

2018-04-20 15:36:02 +08:00

回复了 U87 创建的主题 › 问与答 › scrapy 某个参数是通 meta 传的，在 debug 的时候居然出现那个参数 = DOWNLOAD_TIMEOUT？

难道 meta 是浅拷贝，需要深拷贝？

2018-04-20 15:27:59 +08:00

回复了 U87 创建的主题 › 问与答 › 原谅我这个伸手党

@F1024 谢谢现在解决了

2018-04-20 10:13:54 +08:00

回复了 U87 创建的主题 › 问与答 › 原谅我这个伸手党

@ioven 好的，我自己研究下，谢啦，老哥，好人一生平安

2018-04-19 17:46:02 +08:00

回复了 U87 创建的主题 › 问与答 › 原谅我这个伸手党

@animal 恩，为啥要小写

2018-04-19 15:51:28 +08:00

回复了 U87 创建的主题 › 问与答 › 原谅我这个伸手党

@ioven 卧槽，老哥这是什么原理，为啥小写就行啊？

2018-04-19 15:21:32 +08:00

回复了 U87 创建的主题 › 问与答 › 原谅我这个伸手党

url = ''''''
data = {"currPage":1, "typeId":30091, "pageSize":20}
r1 = requests.post(url=url, data=data).text
r = etree.HTML(r1)
max_count = r.xpath('//div[id="TestView_pageableDiv"]/@totalSize')
print(max_count)
我这样按理说是可以获取到的，到始终为空

2018-04-19 15:18:24 +08:00

回复了 U87 创建的主题 › 问与答 › 原谅我这个伸手党

@animal 不对啊，报错了。。

2018-04-19 14:35:33 +08:00

回复了 U87 创建的主题 › 问与答 › 原谅我这个伸手党

<div id="TestView_pageableDiv" class="m-pagination" style="font-family: 'Microsoft YaHei';" totalSize="19790" pageSize="20" currPage="2">

</div>
这个哈谢谢啦

1 2 3 4 5

❮

❯