V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
V2EX 提问指南
esolve
V2EX  ›  问与答

两张千万级 mysql 大表,如何比较?

  •  
  •   esolve · 2018-12-07 21:43:01 +08:00 · 2004 次点击
    这是一个创建于 2176 天前的主题,其中的信息可能已经有所发展或是发生改变。

    有两张千万级 mysql 大表,是同样的表结构,record 绝大部分都一样,现在要找出那些不同的数据项,先找出主键不一样的项,如何找?

    5 条回复    2018-12-08 16:20:20 +08:00
    vibbow
        1
    vibbow  
       2018-12-07 22:15:02 +08:00
    导出成 csv,然后 beyond compare ?
    或者 navicat ?
    esolve
        2
    esolve  
    OP
       2018-12-07 23:44:06 +08:00
    dingding
    j2gg0s
        3
    j2gg0s  
       2018-12-08 01:06:47 +08:00
    有没有自增 ID ?能不能分段扫出来,一段一段做比较,也就几个小时而已。
    或者到数据平台直接比较就好
    Felldeadbird
        4
    Felldeadbird  
       2018-12-08 09:26:03 +08:00 via iPhone
    @vibbow 千万表,估计这样对比会卡死了。
    我想到也是和 3 楼一样,只能一段一段比。高效的没想到
    esolve
        5
    esolve  
    OP
       2018-12-08 16:20:20 +08:00
    @j2gg0s hbase 怎么比?
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   2863 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 26ms · UTC 11:17 · PVG 19:17 · LAX 03:17 · JFK 06:17
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.