V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
sjmcefc2
V2EX  ›  程序员

吐槽一下 snowflake,大家用的怎么样?

  •  
  •   sjmcefc2 · 2021-08-29 12:34:36 +08:00 · 3598 次点击
    这是一个创建于 1159 天前的主题,其中的信息可能已经有所发展或是发生改变。

    初步感觉就是快了些,但是看产品介绍总觉得他的功能 awsgcp 都已经有所实现了。这家优势在哪里呢?

    19 条回复    2021-08-30 20:37:01 +08:00
    billlee
        1
    billlee  
       2021-08-29 12:52:31 +08:00   ❤️ 1
    还以为说的是 twitter snowflake
    sjmcefc2
        2
    sjmcefc2  
    OP
       2021-08-29 13:05:19 +08:00
    不是说算法啊
    zhaokun
        3
    zhaokun  
       2021-08-29 14:21:41 +08:00   ❤️ 2
    我以为是 ID 算法
    sjmcefc2
        4
    sjmcefc2  
    OP
       2021-08-29 14:41:50 +08:00
    完蛋了,原来这么不普遍啊。以为 snowflake 很普遍呢
    bao3
        5
    bao3  
       2021-08-29 15:03:57 +08:00
    我以为是 Tor project 的 snowflake 连接。。。。。打扰了。
    leeg810312
        6
    leeg810312  
       2021-08-29 15:28:33 +08:00 via Android
    snowflake 架构是为云原生设计的,大数据全周期方案,而且技术中立,客户不会被锁定某个云厂商,几大国际云厂商都有合作了。另一家对标厂商 databricks,一样模式的产品,我们也在给客户做的项目中用,我觉得挺好用的
    szuwl
        7
    szuwl  
       2021-08-29 15:39:35 +08:00
    我还以为是 showmaker
    dayeye2006199
        8
    dayeye2006199  
       2021-08-29 15:52:58 +08:00
    可以,简单易用,账单感人。
    sjmcefc2
        9
    sjmcefc2  
    OP
       2021-08-29 16:13:42 +08:00
    @dayeye2006199 是特别贵吗?
    sjmcefc2
        10
    sjmcefc2  
    OP
       2021-08-29 16:13:55 +08:00
    @bao3 这个我也很感兴趣,哈哈
    sjmcefc2
        11
    sjmcefc2  
    OP
       2021-08-29 16:14:51 +08:00
    @leeg810312 databricks 好像更加底层啊。
    这些都是什么客户在用啊?
    Jooooooooo
        12
    Jooooooooo  
       2021-08-29 17:40:18 +08:00
    想进来说 snowflake 是一种 id 生成思想

    原来...
    xupefei
        13
    xupefei  
       2021-08-29 17:59:39 +08:00 via iPhone
    不好,建议更换我司产品🐶
    sjmcefc2
        14
    sjmcefc2  
    OP
       2021-08-29 18:31:22 +08:00
    @xupefei 你家是啥?
    xupefei
        15
    xupefei  
       2021-08-29 18:48:45 +08:00 via iPhone
    @sjmcefc2 🧱
    sjmcefc2
        16
    sjmcefc2  
    OP
       2021-08-29 21:56:50 +08:00
    @xupefei bricks ?厉害了,我也会是看 bricks 更加底层啊
    dayeye2006199
        17
    dayeye2006199  
       2021-08-30 06:07:49 +08:00
    @sjmcefc2 账单太贵,其实有时候也是一个好事,是一个量变到质变的一个指标。

    上 snowflake 后,其实让数据查询和运算变得特别的“亲民”,因为 snowflake 处理掉了大量的底层的运算和存储。之前这些数据都是公司内部工程师和数据科学家才懂得如何获取和处理(需要获取大量权限,确保查询要经过优化),现在变成业务人员、分析师,大家经过一定的学习之后都会自己处理一些简单的需求。

    一些 BI 软件,链接 snowflake 这样的云上数仓之后,也变得特别的易用,谁都可以整两个漂亮的 dashboard 支持一下自己组的业务需求。一些数据管道需求,配合 dbt 这类的工具,我见过很多偏业务的分析师都能写出相当可用的管道代码。所以每个业务组都会开始做自己的数据产品,来支持自己的业务运营。

    所以,公司内部其实对数据的依赖和使用率更高了,激发了大家创造力,副作用是会造成账单比你之前估计的要高很多。
    但怎么平衡这个成本和收益,也是仁者见仁智者见智。我个人觉得公司变得更加“数据驱动”是很好的,多付的这点计算费用还是划得来的,公司的运营效率,方向感更强了,带来的好处远胜于这些成本。
    leeg810312
        18
    leeg810312  
       2021-08-30 12:54:26 +08:00
    @sjmcefc2 我们用 Azure,Databricks SQL 已经是预览版,从数据科学、机器学习到较为上层的数仓应用都有,从较底层到上层的大数据解决方案全覆盖,可能从使用上 databricks 可以操控较底层让你觉得它是偏底层, 从对外形象来说和 SnowFlake 完全是相同模式,提供原生云大数据平台一站式方案,让企业用大数据技术不再需要考虑基础设施,技术形态是 PaaS+Saas
    sjmcefc2
        19
    sjmcefc2  
    OP
       2021-08-30 20:37:01 +08:00
    @leeg810312
    @dayeye2006199 感谢两位的解惑,让我大开眼界了。
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   1317 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 28ms · UTC 23:28 · PVG 07:28 · LAX 16:28 · JFK 19:28
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.