V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
ultimate010
V2EX  ›  程序员

搞了个 app 爬虫,挺好玩,能卖吗?

  •  
  •   ultimate010 · 2017-01-14 11:19:23 +08:00 · 5188 次点击
    这是一个创建于 2674 天前的主题,其中的信息可能已经有所发展或是发生改变。
    最近研究了下某条视频,破解了 web 端 js 签名,下载 so so 快。流量大到搞得都被封 ip 了,不过这些都可以解决。

    然后研究了某手视频, web 端比较弱,没啥可以下载的,于是研究 app ,请求有签名,不过不是问题,通过代理,把所有请求拦截了,然后下载 so so 的快。不过手机点击是个问题,但是有自动化工具,所以又不是问题了。

    说了这么多,就是好奇有没有其他人也有同样的需求,能否变现啊?
    15 条回复    2018-12-26 15:02:51 +08:00
    jpmorn
        1
    jpmorn  
       2017-01-14 11:21:59 +08:00
    直接在人网站上看就好了,又没广告。同质化很多,微博大号都会转。
    qiayue
        2
    qiayue  
       2017-01-14 11:24:24 +08:00   ❤️ 1
    偷偷拿了别人的数据,自己玩下就好了,如果想以此获利,等着法律制裁吧
    cheny95
        3
    cheny95  
       2017-01-14 11:29:15 +08:00   ❤️ 1
    这类程序就算开源都得写上“仅用作学习”之类。
    之前弄了个美剧搜索的,是基于 v 友进行优化的,感觉技术思路可以共享,但是拿来赚钱,不太可能。
    传送门: /t/312755
    (数据是 rrmj 的~)
    ultimate010
        4
    ultimate010  
    OP
       2017-01-14 11:42:25 +08:00
    哦,许多公司暗地里都干着这样的勾当,减少重复造轮子而已。
    soli
        5
    soli  
       2017-01-14 14:32:29 +08:00
    这是视频爬虫吧?不是 App 爬虫?
    ddmkchan
        6
    ddmkchan  
       2017-01-14 15:09:20 +08:00
    直播类 app 的爬虫,是否也有研究?
    ultimate010
        7
    ultimate010  
    OP
       2017-01-14 15:42:20 +08:00
    @soli 爬 app 内容,大部分都可以。
    ultimate010
        8
    ultimate010  
    OP
       2017-01-14 15:42:54 +08:00
    @ddmkchan 直播应该可以,就是获取 hls 地址而已,没深入研究。
    lecher
        9
    lecher  
       2017-01-14 15:48:43 +08:00 via Android
    很多 Web 上面严格控制权限的业务。
    到了 app ,就有偷懒下放权限在客户端校验的情况,另外就是一些本地体验优化的业务,喜欢用 app 生成签名的形式做加密,而签名的密钥则永久有效,服务端只校验加密数据,不校验请求有效期。

    挂代理爬 app 里面的数据可以卖,尤其一些严格限制需要登录才能处理的业务。但是最值钱的还是拿到密钥和加密处理之后,卖发帖留言这类的刷量数据。
    ddmkchan
        10
    ddmkchan  
       2017-01-14 16:12:31 +08:00
    @ultimate010 有直播 APP 的数据需求,能否加个联系方式?
    ddmkchan
        11
    ddmkchan  
       2017-01-14 16:27:56 +08:00
    @ultimate010 124242477 , 能否咨询下?
    ultimate010
        12
    ultimate010  
    OP
       2017-01-14 21:11:54 +08:00
    @lecher 反编译过 app ,各种混淆加密,感觉很难找到密钥,难度太大,所以才有了在代理层面拦截所有请求。
    ultimate010
        13
    ultimate010  
    OP
       2017-01-14 21:12:05 +08:00
    @ddmkchan 已加
    benbenzhangqi
        14
    benbenzhangqi  
       2017-01-14 23:32:04 +08:00
    @cheny95 感谢推荐 确实是一个很不错的东西
    Da8289
        15
    Da8289  
       2018-12-26 15:02:51 +08:00
    请问现在爬虫是否还有更新,对一些 Hero APP 有数据需求,若可以麻烦加个联系方式,QQ:1516097996
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   947 人在线   最高记录 6543   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 26ms · UTC 21:00 · PVG 05:00 · LAX 14:00 · JFK 17:00
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.