V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
MySQL 5.5 Community Server
MySQL 5.6 Community Server
Percona Configuration Wizard
XtraBackup 搭建主从复制
Great Sites on MySQL
Percona
MySQL Performance Blog
Severalnines
推荐管理工具
Sequel Pro
phpMyAdmin
推荐书目
MySQL Cookbook
MySQL 相关项目
MariaDB
Drizzle
参考文档
http://mysql-python.sourceforge.net/MySQLdb.html
FenixVu
V2EX  ›  MySQL

mysql4G 的一个库,导入了一天还没导入完

  •  
  •   FenixVu · 2022-11-25 20:26:08 +08:00 · 2633 次点击
    这是一个创建于 728 天前的主题,其中的信息可能已经有所发展或是发生改变。

    这咋定位问题啊 看 show processlist ,也没锁表还在 insert 同期跑的一个 32g 的早跑完了

    7 条回复    2022-11-26 11:41:16 +08:00
    seers
        1
    seers  
       2022-11-25 20:46:38 +08:00 via Android
    看日志是不是写满了一直在刷日志,系统 io 也检查下是不是有其他占用
    bjzhush
        2
    bjzhush  
       2022-11-25 21:26:26 +08:00
    直接看 SQL ,看看是不是逐条 insert ,如果是批量 insert 一次 insert 几十上百条数据会快很多
    awanabe
        3
    awanabe  
       2022-11-25 22:18:38 +08:00   ❤️ 1
    小技巧:
    建表的时候先把表的索引全部去掉, 然后导入就很快, 导入之后再加索引
    westoy
        4
    westoy  
       2022-11-25 22:20:11 +08:00
    是不是没关事务
    realpg
        5
    realpg  
       2022-11-26 04:12:32 +08:00
    建议找个 dba
    FenixVu
        6
    FenixVu  
    OP
       2022-11-26 09:17:43 +08:00
    @bjzhush
    卧槽真的,我看了下 1000w+insert
    bjzhush
        7
    bjzhush  
       2022-11-26 11:41:16 +08:00
    @FenixVu 如果一行一个 SQL ,你可以写代码自己合并批量 insert ,记得建表语句去掉索引
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   2876 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 29ms · UTC 03:35 · PVG 11:35 · LAX 19:35 · JFK 22:35
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.