V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
V2EX  ›  stillsilly  ›  全部回复第 1 页 / 共 39 页
回复总数  775
1  2  3  4  5  6  7  8  9  10 ... 39  
7 小时 45 分钟前
回复了 lidongIOJK 创建的主题 问与答 chrome 插件开发
@MEIerer
puppeteer 相当于一个 chrome 浏览器 怎么可能在插件上运行浏览器

插件记录用户的行为(点击、滚动等操作)和意图(要提取哪些数据,字段名叫什么)。
然后根据用户的行为和意图生成一段 puppeteer 爬虫脚本。
然后还有一个 nodejs 程序,点击插件上的“开始爬取”按钮,会把脚本代码发给 nodejs ,nodejs 会自动开启 puppeteer 并执行 puppeteer 爬虫脚本爬数据,并且把爬到的数据存起来。

我写 demo 的时候 nodejs 和 puppeteer 都在我本地,但是设计是应该放服务器上,可以同时执行很多个采集任务。
规划那个版本的项目经理后来离职了,所以只是个 demo ,后来没有做成实际应用的项目。按他的计划这个 demo 要做完善,替换掉公司的一个数据采集平台
化龙巷(常州的一个本地论坛)旗下的千帆 有现成的 sass 服务和运营指导,一年应该不用 8 万
1 天前
回复了 lidongIOJK 创建的主题 问与答 chrome 插件开发
我以前做过一个 demo
魔改了一下 puppeteer-recorder ,改成八爪鱼那样,点一下弹出很多配置项的,然后把用户的点击动作和选的配置项生成 puppeteer 爬虫脚本,可以爬市面上 90%的列表页+详情页(测了 1000 个网站,就 10 来个不支持)
你需要去医院看看
7 天前
回复了 captain55 创建的主题 职场话题 一边上班如上坟,一边担心裁员
公司去年年底裁了 2 批人,羡慕他们能拿大礼包
7 天前
回复了 captain55 创建的主题 职场话题 一边上班如上坟,一边担心裁员
好想被裁
7 天前
回复了 DavidTsou 创建的主题 投资 2024 年 目前把钱存哪里收益高点。
百信银行 5 年大额存单 3.8%
23 天前
回复了 miracle778 创建的主题 投资 大家工资存在哪
都给 a 股交学费了
把这个方法上贡给英国王室,他们会给你封个伯爵
有这么难抢吗
我在做的项目年前提测,不确定哪天能走,我买了 3 张不同日期的票
33 天前
回复了 wocanmei 创建的主题 阅读 红楼梦人物关系
小时候看的书 目录前面就是一张人物关系表
想起看过的一个电影/电视剧里面的情节,有个人在咖啡店看到一个女生一个人坐着,想去撩她,假装认错了编了个名字跟她打招呼聊天。
人跟人之间区别真的很大,有的人会故意弄错,脸不红心不跳 谎话说起来游刃有余,有的人真的不小心弄错了 面红耳赤想找个地洞钻进去
42 天前
回复了 snowflate 创建的主题 问与答 是时候给 10 岁的孩子大开眼界了
10 岁看楚门的世界 别整抑郁了
1  2  3  4  5  6  7  8  9  10 ... 39  
关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   我们的愿景   ·   实用小工具   ·   3928 人在线   最高记录 6543   ·     Select Language
创意工作者们的社区
World is powered by solitude
VERSION: 3.9.8.5 · 36ms · UTC 10:21 · PVG 18:21 · LAX 02:21 · JFK 05:21
Developed with CodeLauncher
♥ Do have faith in what you're doing.