V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
V2EX  ›  Ritter  ›  全部回复第 19 页 / 共 22 页
回复总数  437
1 ... 11  12  13  14  15  16  17  18  19  20 ... 22  
2020-01-19 16:41:38 +08:00
回复了 Ritter 创建的主题 Python 大佬们 我这协程写的有毛病吗?
@pmispig 这是 carbon 网站生成的图片 样式用的是 VScode 的
2020-01-19 16:39:06 +08:00
回复了 Ritter 创建的主题 Python 大佬们 我这协程写的有毛病吗?
@jyyx
@Vegetable
@ipwx
是报异常了 原因也是因为异常导致 put 的数量和 task_done 不一致
学到了 感谢各位大佬的鼎力相助
谢谢谢谢~~
2020-01-19 16:18:04 +08:00
回复了 Ritter 创建的主题 Python 大佬们 我这协程写的有毛病吗?
@BBrother 输出是有输出的 就是有概率会阻塞
2020-01-19 16:15:52 +08:00
回复了 Ritter 创建的主题 Python 大佬们 我这协程写的有毛病吗?
@jyyx
@Vegetable 可是异常不会向上传播吗?
2020-01-19 16:15:23 +08:00
回复了 Ritter 创建的主题 Python 大佬们 我这协程写的有毛病吗?
@chenqh https://asyncio.readthedocs.io/en/latest/producer_consumer.html 官网第一个例子应该是你说的这种处理方式 我之前试过貌似也会卡住
2020-01-19 15:55:24 +08:00
回复了 Ritter 创建的主题 Python 大佬们 我这协程写的有毛病吗?
@BBrother 可是 put 函数是可以完整运行完的 这里是运行到一半的时候卡住了
2020-01-19 15:49:39 +08:00
回复了 Ritter 创建的主题 Python 大佬们 我这协程写的有毛病吗?
@Vegetable
async def run(self):
crawls = [self.crawl(i) for i in range(self.max_concurrency)]
consumer = asyncio.gather(*crawls)
...
# cancel consumer
consumer.cancel()

我这里已经把 consumer 取消了
2020-01-19 15:44:19 +08:00
回复了 Ritter 创建的主题 Python 大佬们 我这协程写的有毛病吗?
@chenqh 好像是 但是我后面一句已经把 consumer 取消了
2020-01-19 15:36:36 +08:00
回复了 Ritter 创建的主题 Python 大佬们 我这协程写的有毛病吗?
@chenqh put 这个函数是可以运行完的
2020-01-19 15:36:08 +08:00
回复了 Ritter 创建的主题 Python 大佬们 我这协程写的有毛病吗?
@ipwx 大佬 asyncio 的队列能跨线程使用吗
2020-01-19 15:35:36 +08:00
回复了 Ritter 创建的主题 Python 大佬们 我这协程写的有毛病吗?
@youngce 请求库是 aiohttp 异步的 意思是 读取文件那里卡住了吗
2020-01-19 15:34:23 +08:00
回复了 Ritter 创建的主题 Python 大佬们 我这协程写的有毛病吗?
@chenqh 大佬 我打印了一下 貌似是在 self.q.get()这卡住了
2020-01-19 15:28:16 +08:00
回复了 Ritter 创建的主题 Python 大佬们 我这协程写的有毛病吗?
@ipwx asyncio.gather 之后确实是会运行的 我试过了
2020-01-19 15:27:47 +08:00
回复了 Ritter 创建的主题 Python 大佬们 我这协程写的有毛病吗?
@ipwx 代码都是官网抄的 怎么会出错我也不知道啊(狗头)
2020-01-19 15:20:11 +08:00
回复了 Ritter 创建的主题 Python 大佬们 我这协程写的有毛病吗?
@ipwx 可是他是执行到一半的时候阻塞了 self.q.put()这句代码是可以执行到的
2020-01-19 15:17:36 +08:00
回复了 Ritter 创建的主题 Python 大佬们 我这协程写的有毛病吗?
@cz5424 Ctrl C 中断不了
2020-01-19 15:14:09 +08:00
回复了 Ritter 创建的主题 Python 大佬们 我这协程写的有毛病吗?
2020-01-19 15:10:04 +08:00
回复了 Ritter 创建的主题 Python 大佬们 我这协程写的有毛病吗?
@cz5424 大佬上面有代码
2020-01-19 14:52:05 +08:00
回复了 Ritter 创建的主题 Python 大佬们 我这协程写的有毛病吗?
难受
2020-01-19 14:41:35 +08:00
回复了 Ritter 创建的主题 Python 大佬们 我这协程写的有毛病吗?
对了
生产者是从本地文件夹读取字典文件
消费者拼接 url 发起请求
1 ... 11  12  13  14  15  16  17  18  19  20 ... 22  
关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   991 人在线   最高记录 6679   ·     Select Language
创意工作者们的社区
World is powered by solitude
VERSION: 3.9.8.5 · 16ms · UTC 20:17 · PVG 04:17 · LAX 13:17 · JFK 16:17
Developed with CodeLauncher
♥ Do have faith in what you're doing.