• 请不要在回答技术问题时复制粘贴 AI 生成的内容
simonvis
V2EX  ›  程序员

一般企业会在处理数据上遇到哪些问题

  •  
  •   simonvis · Jul 8, 2019 · 1669 views
    This topic created in 2518 days ago, the information mentioned may be changed or developed.

    目前我总结的问题有以下几点: 1、数据采集(数据埋点,用 elasticsearch 收集埋点数据); 2、数据抽取(之前用存储过程,不易维护;也用过开源 ETL 工具,talend,效率低;现在用 python 脚本,成本较大) 3、数据整合(埋点数据和业务数据整合),数据存放在 mysql,目前没有用到数据仓库;

    想知道大家在工作中会遇到哪些数据上的问题,一起探讨一下呀!

    vanton
        1
    vanton  
       Jul 8, 2019
    > 数据存放在 mysql

    最好不要这么干。
    LaFayette
        2
    LaFayette  
       Jul 9, 2019
    上阿里云 dataworks
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Solana   ·   2935 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 40ms · UTC 08:45 · PVG 16:45 · LAX 01:45 · JFK 04:45
    ♥ Do have faith in what you're doing.