Python 如何爬点击提交后生成的 iframe 里的内容？

V2EX = way to explore

V2EX 是一个关于分享和探索的地方

已注册用户请登录

这是一个创建于 2957 天前的主题，其中的信息可能已经有所发展或是发生改变。

用 selenium 的话貌似还要装浏览器，放服务器上不合适吧。
还有其他方案么？如果又示例就更好了，谢谢。

8 条回复 • 2016-04-16 10:08:31 +08:00

binux

2016-04-15 19:17:16 +08:00

iframe 有自己的 url 的，直接抓 iframe 的 url 就好了

sunbeams001

2016-04-15 20:44:45 +08:00

用 phantomjs 不需要吧

sivacohan

2016-04-15 20:57:03 +08:00 via Android

如果你是随便玩 @binux 的方法就管用
如果你是要做某些证据的采样，你首先要通过美亚的认证，然后用 selenium 截图

coolair

2016-04-15 21:16:24 +08:00

@binux 抓了 iframe 的 URL 但是获取不到数据，不知道为啥。

coolair

2016-04-15 21:59:00 +08:00

@binux iframe 只是没填数据的空表，数据需要在嵌 iframe 的那个页面点提交才能请求得到。

binux

2016-04-15 22:20:51 +08:00

@coolair 那就是个 post 请求呗。先打点基础

coolair

2016-04-15 22:35:45 +08:00

@binux 我知道是 post 请求，拼的 post 和 headers 加 cookies 发过去没数据啊

Exin

2016-04-16 10:08:31 +08:00 via Android

用浏览器仔细跟踪一下 submit 之后的各种请求