anonymoustian
V2EX  ›  Hadoop

hbase 如何导出部分数据?

  •  
  •   anonymoustian · May 16, 2018 · 3957 views
    This topic created in 2918 days ago, the information mentioned may be changed or developed.

    hbase 里面有大量的数据,几 T 的那种,想导出部分的数据给其他系统测试接口用,有什么好的方法吗?

    3 replies    2018-05-16 16:13:19 +08:00
    monkeylyf
        1
    monkeylyf  
       May 16, 2018
    直接读 hfile ?
    问题描述的不是很清楚,再具体点:准备导出多大数据,数据的 rowkey 的分布大概是什么样的,导出时间要求多长。如果是一次性导出那就随便写个都行啊。
    anonymoustian
        2
    anonymoustian  
    OP
       May 16, 2018
    @monkeylyf 就想像 sql 一样,limit 100~200 的这种。rowkey 就是随机分
    monkeylyf
        3
    monkeylyf  
       May 16, 2018
    @anonymoustian hbase batch get 目测满足你的需求。
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Solana   ·   4106 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 38ms · UTC 10:17 · PVG 18:17 · LAX 03:17 · JFK 06:17
    ♥ Do have faith in what you're doing.