V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
ArchiTech
V2EX  ›  分享发现

自动检测任意网站某个数值的变化的工具

  •  
  •   ArchiTech · 2017-07-31 05:10:55 +08:00 · 4877 次点击
    这是一个创建于 2676 天前的主题,其中的信息可能已经有所发展或是发生改变。

    请问有人知道有哪些可以自动检测任意网站某个数值的变化的工具吗? 我找到了一些网站可以提供这种功能但都是针对具体某个电商网站的,比如检测淘宝某个产品的价格变化等等。 但我希望有一个比较通用的工具或者网站可以实现这个功能,我可以指定某个网址上的某个元素进行检测,每十分钟查一次最新的值是多少,如果低于多少就邮件提醒我。。。

    没有的话正好可以作为我接下来空闲时间的小项目做做,但是有的话就不想重复做轮子了。

    第 1 条附言  ·  2017-12-20 17:54:34 +08:00
    现成的都多少有些限制,最后还是自己写了一个 http://webwatchman.com/
    可以每分钟频繁检查网页有没变化~
    14 条回复    2017-12-20 17:53:44 +08:00
    lsj5031
        1
    lsj5031  
       2017-07-31 06:19:15 +08:00   ❤️ 1
    我用的 visualping,支持你造一个更好用的轮子
    Laynooor
        2
    Laynooor  
       2017-07-31 06:37:53 +08:00 via Android
    cnnblike
        3
    cnnblike  
       2017-07-31 06:58:17 +08:00
    我写过一个,不过比你想的蠢多了,我用的 python,定时抓网页,parse,然后查看某个值是否改变,因为是放在树莓派上跑,也就没写 smtp,直接让他点灯的
    CloudnuY
        4
    CloudnuY  
       2017-07-31 08:28:52 +08:00
    同求,现在还是粗暴的 python+requests+xpath 监控,cron 定时执行,发送 ftqq
    yan5990853
        5
    yan5990853  
       2017-07-31 08:33:52 +08:00 via Android
    feed43 类似的无 RSS 源订阅,chrome 插件也有见过
    niuoh
        6
    niuoh  
       2017-07-31 08:54:16 +08:00
    貌似就几行代码的事 requests 粗暴解决
    954880786
        7
    954880786  
       2017-07-31 09:21:12 +08:00 via iPhone
    我写过一个可以将网页上任何文本改动检测出来的程序,主要是用的监测新闻站的。
    LevineChen
        8
    LevineChen  
       2017-07-31 09:33:26 +08:00   ❤️ 1



    之前做的小玩意(半成品), 图上是采集页. 最终信息会汇总到一个列表. 让你所关注信息一目了然... 因为我是个学过设计的码农界面越做越丑做不下去了..
    LevineChen
        9
    LevineChen  
       2017-07-31 09:36:41 +08:00
    csx163
        10
    csx163  
       2017-07-31 10:35:22 +08:00
    自建 WIKI 不就是干这个的么
    ArchiTech
        11
    ArchiTech  
    OP
       2017-07-31 14:11:47 +08:00
    针对具体某次任务写一个 cron job 是很容易,但想要实现一个通用的解决方案就困难很多了。感谢楼上提供的 visualping, Distill.io 等工具,它们的解决方案都不错。我能想到的与之不同的方案是做一个 chrome extension, 用户选中要检测的元素后点直接右键打开的菜单中可以看到关注该元素的选项。这个方案的好处是好操作,局限性是必须安装 chrome 插件。。
    MrSoda
        12
    MrSoda  
       2017-07-31 15:48:57 +08:00
    自己用 phantomjs 写过一个很小很小的工具,用来检测网页内容不错
    Helen
        13
    Helen  
       2017-07-31 17:55:58 +08:00   ❤️ 1
    ArchiTech
        14
    ArchiTech  
    OP
       2017-12-20 17:53:44 +08:00
    现成的都多少有些限制,最后还是自己写了一个 http://webwatchman.com/
    可以每分钟频繁检查网页有没变化~
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   1383 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 23ms · UTC 17:36 · PVG 01:36 · LAX 09:36 · JFK 12:36
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.