首页   注册   登录
V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
推荐学习书目
Learn Python the Hard Way
Python 学习手册
Python Cookbook
Python 基础教程
Python Sites
PyPI - Python Package Index
http://www.simple-is-better.com/
http://diveintopython.org/toc/index.html
Pocoo
值得关注的项目
PyPy
Celery
Jinja2
Read the Docs
gevent
pyenv
virtualenv
Stackless Python
Beautiful Soup
结巴中文分词
Green Unicorn
Sentry
Shovel
Pyflakes
pytest
Python 编程
pep8 Checker
Styles
PEP 8
Google Python Style Guide
Code Style from The Hitchhiker's Guide
V2EX  ›  Python

找小伙伴一起写个棒棒的 Python 数据迁移工具

  •  
  •   jfry · 160 天前 · 2532 次点击
    这是一个创建于 160 天前的主题,其中的信息可能已经有所发展或是发生改变。
    我的目标是写一个尽量全面,易用和高性能的数据迁移工具,目前只是基本可以用的状态(代码就 1000 行)。对这个项目感兴趣,想要提高自己 python 功底,加深对数据库的理解的朋友快来呀~ https://github.com/toaco/carry

    目前需要做的
    - 并发,缓存,压缩, 数据库本身的 LOAD 和 EXPORT 功能
    - 功能完善
    - 测试
    第 2 条附言  ·  158 天前
    已经支持 Python3 了
    31 回复  |  直到 2018-01-12 04:42:52 +08:00
        1
    kevindu   160 天前
    Python2.7 吗?
        2
    jfry   160 天前
    @kevindu 目前是 2.7,如果要用 3 的话我可以改
        3
    loading   160 天前 via Android   ♥ 1
    看看阿里的 datax,然后在再考虑自己写。
        4
    slgz   160 天前
    只有 python web 能加入吗
        5
    jfry   160 天前
    @slgz 肯定可以呀,做 web 的都会数据库~
        6
    slgz   160 天前
    @jfry 这咋讨论微信吗?
        7
    lengyihan   160 天前 via Android
    这个数据迁移是做数据库迁移还是硬盘所有类型数据迁移啊?
        8
    laycher   160 天前
    近期倒是有想法把 xls 类的文件数据导入到数据库中。用 python3
        9
    jfry   160 天前
    @slgz 微信,jfry898996
        10
    jfry   160 天前
    @lengyihan @laycher 目前支持 csv 和数据库,目标是尽量支持多种类型的数据源,比如 excel 等
        11
    est   160 天前
    @loading wow。这目录结构整齐划一的 reader, writer, reader, writer, reader, writer, reader, writer, reader, writer

    https://github.com/alibaba/DataX

    不多说了赶紧 star。
        12
    janxin   160 天前   ♥ 1
    @est 很好,这很 Java
        13
    dudu2017   160 天前 via iPhone
    什么水平都可以参与吗?😬非计算机专业趁寒假在家自学的可以参与吗?
        14
    gzas1989   160 天前   ♥ 1
    有钉钉群么
        15
    jfry   160 天前
    @dudu2017 嗯,都可以的。但是如果你是为了做 web,爬虫什么而学 python 的话最好去做相关的项目。
        16
    jfry   160 天前
    @gzas1989 没有,只有 WX
        17
    douglas1997   160 天前   ♥ 1
    @jfry 可以试试 Slack
        18
    dudu2017   160 天前
    @jfry 嗯,好的。那我暂时不参与了
        19
    xuzequn   160 天前
    举手🙋
        20
    jfry   160 天前
    @xuzequn 欢迎~
        21
    jotsai   160 天前
    python 渣渣也能加入吗 =。=
        22
    jfry   160 天前
    @jotsai 感兴趣就可以呀=。=
        23
    xwhxbg   160 天前
    三手 Python,很感兴趣,先 star 一波,话说怎么加入啊?有木有 contribute 规范呢?
        25
    chi1st   160 天前
    想加入~
        26
    vimiix   160 天前
    @jfry 大佬,注册好了,然后怎么玩
        27
    jfry   160 天前
    @chi1st 点上面那个 slack 链接进来就行~
        28
    jfry   160 天前
    @vimiix 看里面的#general channel
        29
    beginor   160 天前 via Android
    先看看 datax,最近也在鼓捣这个东西,可惜不会 py
        30
    mianju   160 天前
    先加入了试看看> <
        31
    OldPanda   159 天前
    加入了 slack 去看看项目具体内容
    关于   ·   FAQ   ·   API   ·   我们的愿景   ·   广告投放   ·   鸣谢   ·   1067 人在线   最高记录 3541   ·  
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.1 · 29ms · UTC 17:21 · PVG 01:21 · LAX 10:21 · JFK 13:21
    ♥ Do have faith in what you're doing.
    沪ICP备16043287号-1