V2EX › dsg001 的所有回复 › 第 40 页 / 共 40 页

V2EX = way to explore

V2EX 是一个关于分享和探索的地方

现在注册

已注册用户请登录

1 ... 31 32 33 34 35 36 37 38 39 40

❮

❯

2016-09-08 09:43:16 +08:00

回复了 dsg001 创建的主题 › Python › 放出去的爬虫被泛解析站群困住了，如何才能爬出去？

@wyntergreg 泛解析的站群，无限二级域名，记录也没用

2016-09-08 07:08:27 +08:00

回复了 dsg001 创建的主题 › Python › 放出去的爬虫被泛解析站群困住了，如何才能爬出去？

@zhjits 相似度没用，全部都是随机调用， js 写入框架

2016-09-07 20:41:23 +08:00

回复了 datayes2015 创建的主题 › Python › 借助 Python 实现海龟交易系统：）

十年前用飞狐写指标

2016-09-01 10:06:43 +08:00

回复了 ugugzh 创建的主题 › 程序员 › 只会百度不会写代码

把代码加关键词扔到印象笔记，以后用到直接到笔记搜索，实在太闲还可以优化下

2016-09-01 10:04:49 +08:00

回复了 jinxueliu 创建的主题 › 数据库 › 存储大量的文件该选用哪种数据库？

几千万<100K 文件硬盘扛不住，压缩后扔到数据库

2016-08-30 10:49:48 +08:00

回复了 creaer 创建的主题 › Python › Python 反爬虫

@creaer
@airqj
所以尽量提高单位时间的爬取速度，被封后换 IP 继续

2016-08-29 16:34:58 +08:00

回复了 creaer 创建的主题 › Python › Python 反爬虫

单机几百线程爬知乎，爬 20+小时没问题，过了几天才被封

2016-08-28 21:04:18 +08:00

回复了 skhe 创建的主题 › Python › 500LineorLess | a sample web server，不到 500 行 Python 代码，教你实现 web 服务器。

支持一下，超赞

2016-08-27 19:48:25 +08:00

回复了 dsg001 创建的主题 › Python › 单 IP 如何最大限度爬取 GG 搜索结果？

@lbp0200 用来跟踪网站排名，方便以后分析的。另外百度应该有足够的 IP 进行轮询吧

2016-08-26 09:04:05 +08:00

回复了 Reign 创建的主题 › 程序员 › Googlebot 能探测到 cloudflare 后面网站的真实服务器 ip 吗？

页面底部隐蔽输出来访 UA 、 IP ，等 GG 收录之后，查看缓存中的 UA 、 IP 就晓得了

2016-08-22 11:47:02 +08:00

回复了 kumobot 创建的主题 › Python › 你们喜欢 Python2 还是 Python3

月经贴！
自己喜欢就好

2016-08-19 09:34:04 +08:00

回复了 cai72738 创建的主题 › Python › 自动提取网页内容

https://github.com/vinta/awesome-python
有自动提取正文的库，但只能针对标准网页，如果太过杂乱也没辙

2016-08-09 18:38:13 +08:00

回复了 darranhuang 创建的主题 › 奇思妙想 › 因为我司有很多萌妹子！萌妹子！萌妹子！就想到了一个 idea，大家来看看你们觉得 OK 嘛？

这不就是种子习惯的早叫服务吗

很多妹纸打电话叫醒服务，还能陪聊一段时间，帮助清醒

2016-08-06 12:25:49 +08:00

回复了 276562578 创建的主题 › Python › 想保存网页成 mht 格式，有没有类似的库呀

gg 到一个 [Python MHT Library]( https://www.chilkatsoft.com/python-mht.asp)

1 ... 31 32 33 34 35 36 37 38 39 40

❮

❯