tomdan
V2EX  ›  Redis

如何将 hive 中的表数据读到内存中,以便我在内存中对这些数据进行操作?这个读的过程怎么读啊,用到什么技术

  •  
  •   tomdan · Aug 5, 2016 · 5549 views
    This topic created in 3577 days ago, the information mentioned may be changed or developed.
    4 replies    2016-08-08 09:06:48 +08:00
    wander2008
        1
    wander2008  
       Aug 5, 2016 via iPhone
    so easy !!!
    inherited
        2
    inherited  
       Aug 6, 2016 via iPhone
    对 Hive 的操作可以考虑上 SparkSQL, 直接 Cache 一下就到内存里了,即使是相同的语句也比之间用 Hive 要快
    tomdan
        3
    tomdan  
    OP
       Aug 8, 2016
    没有接触过 SparkSQL ,我的环境是 Hadoop 和 hive ,不确定有没有用到 spark ,现在的业务是将 hive 中的数据读到内存中后使用 redis 进行逻辑处理,这种情况适用吗?能否加一下 qq 请教一下?我的 1176925869 ,感激!!
    tomdan
        4
    tomdan  
    OP
       Aug 8, 2016
    @inherited 没有接触过 SparkSQL ,我的环境是 Hadoop 和 hive ,不确定有没有用到 spark ,现在的业务是将 hive 中的数据读到内存中后使用 redis 进行逻辑处理,这种情况适用吗?能否加一下 qq 请教一下?我的 1176925869 ,感激!!
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Solana   ·   958 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 33ms · UTC 22:18 · PVG 06:18 · LAX 15:18 · JFK 18:18
    ♥ Do have faith in what you're doing.