V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
V2EX  ›  15874103329  ›  全部回复第 1 页 / 共 1 页
回复总数  20
2019-01-10 13:00:39 +08:00
回复了 15874103329 创建的主题 Python [新人求助] 关于 scrapy 项目中 scrapy.Request 没有回调的问题
已解决,修改代码为 yield scrapy.http.Request(url, callback=self.parse, dont_filter=True)
2019-01-10 12:49:54 +08:00
回复了 15874103329 创建的主题 Python [新人求助] 关于 scrapy 项目中 scrapy.Request 没有回调的问题
@Leigg
2019-01-10 11:35:18 [scrapy.spidermiddlewares.offsite] DEBUG: Filtered offsite request to 'http': <GET http://http//quotes.toscrape.com/page/2>
2019-01-10 11:35:18 [scrapy.core.engine] INFO: Closing spider (finished)
2019-01-10 11:35:18 [scrapy.statscollectors] INFO: Dumping Scrapy stats:
{'downloader/request_bytes': 446,
'downloader/request_count': 2,
'downloader/request_method_count/GET': 2,
'downloader/response_bytes': 2701,
'downloader/response_count': 2,
'downloader/response_status_count/200': 1,
'downloader/response_status_count/404': 1,
'finish_reason': 'finished',
'finish_time': datetime.datetime(2019, 1, 10, 3, 35, 18, 314550),
'item_scraped_count': 10,
'log_count/DEBUG': 14,
'log_count/INFO': 7,
'offsite/domains': 1,
'offsite/filtered': 9,
'request_depth_max': 1,
'response_received_count': 2,
'scheduler/dequeued': 1,
'scheduler/dequeued/memory': 1,
'scheduler/enqueued': 1,
'scheduler/enqueued/memory': 1,
'start_time': datetime.datetime(2019, 1, 10, 3, 35, 14, 371325)}
2019-01-10 11:35:18 [scrapy.core.engine] INFO: Spider closed (finished)
2019-01-10 11:00:16 +08:00
回复了 15874103329 创建的主题 Python [新人求助] 关于 scrapy 项目中 scrapy.Request 没有回调的问题
@carry110
我这还是只打印了一页,不知啥情况
2019-01-10 10:58:01 +08:00
回复了 15874103329 创建的主题 Python [新人求助] 关于 scrapy 项目中 scrapy.Request 没有回调的问题
@Leigg next 打印出来是 '/page/2/'
url 是'http://quotes.toscrape.com/page/2/'
2019-01-09 21:38:06 +08:00
回复了 15874103329 创建的主题 Python [新人求助] 关于 scrapy 项目中 scrapy.Request 没有回调的问题
求助啊
2019-01-09 17:39:36 +08:00
回复了 15874103329 创建的主题 Python [新人求助] 关于 scrapy 项目中 scrapy.Request 没有回调的问题
按照教程里写的,但是我这代码只爬取了一页就结束了,求大佬帮忙看看
2019-01-06 20:14:59 +08:00
回复了 15874103329 创建的主题 问与答 [求助] 为何 pycharm 中无法使用 pyQuery
@weqopy
不行啊,其他的所有库、模块都可以,唯独这个 pyqurey
2019-01-06 19:39:04 +08:00
回复了 15874103329 创建的主题 问与答 [求助] 为何 pycharm 中无法使用 pyQuery
求助啊
2019-01-04 21:26:02 +08:00
回复了 15874103329 创建的主题 问与答 [新人求助] 如何解决淘宝滑动验证的问题
大佬们帮帮忙啊,这里卡一天了
@careofzm 感谢大佬
求大佬帮忙看一下啊
2018-12-22 15:59:49 +08:00
回复了 15874103329 创建的主题 问与答 [求助] 如何提取出网页标签内所有的属性值
@ClutchBear 哦哦,谢谢大佬
2018-12-22 12:29:43 +08:00
回复了 15874103329 创建的主题 问与答 [求助] 如何提取出网页标签内所有的属性值
打印 item 有很多图片,但是获取属性值只打印出了一个,如何将 item 中所有的图片打印出来啊
@V2tizen 老哥,可以了,感谢感谢
gallery: JSON.parse(),这些内容是不要的,只要括号里面的内容,搞了好久搞不出来,求大佬帮忙
2018-12-04 10:00:24 +08:00
回复了 15874103329 创建的主题 Python [小白求助] 爬取猫眼 top100,打印显示为空
额,网址之前是对的,后来换别的网址也是这样,不知道哪里出问题了
2018-11-24 16:02:26 +08:00
回复了 15874103329 创建的主题 Python [新人求教] 无法创建 pipenv 虚拟环境
pipenv==2018.11.14
pip 18.1 from c:\programdata\anaconda3\lib\site-packages\pip (python 3.7)
2018-11-11 15:44:05 +08:00
回复了 15874103329 创建的主题 Python [新人求助] 为何 pycharm 创建 Django 后无法运行
有没有老哥来解答一下,难受
2018-11-04 13:32:50 +08:00
回复了 15874103329 创建的主题 Python 如何解决 KeyError: 'name'
沃日,真的是单词错了,已经狠狠扇了自己两巴掌,感谢各位老哥了
2018-11-04 12:02:38 +08:00
回复了 15874103329 创建的主题 Python 如何解决 KeyError: 'name'
我刚刚学纯小白,老哥能加个 QQ 或者微信么,我截了图,这里还不能发图
关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   1004 人在线   最高记录 6679   ·     Select Language
创意工作者们的社区
World is powered by solitude
VERSION: 3.9.8.5 · 20ms · UTC 21:40 · PVG 05:40 · LAX 13:40 · JFK 16:40
Developed with CodeLauncher
♥ Do have faith in what you're doing.