tomdan
V2EX  ›  Redis

如何将 hive 中的表数据读到内存中,以便我在内存中对这些数据进行操作?这个读的过程怎么读啊,用到什么技术

  •  
  •   tomdan · Aug 5, 2016 · 5954 views
    This topic created in 3748 days ago, the information mentioned may be changed or developed.
    4 replies  •  2016-08-08 09:06:48 +08:00
    wander2008
    wander2008
    Aug 5, 2016 via iPhone
    1
    so easy !!!
    inherited
    inherited
    Aug 6, 2016 via iPhone
    2
    对 Hive 的操作可以考虑上 SparkSQL, 直接 Cache 一下就到内存里了,即使是相同的语句也比之间用 Hive 要快
    tomdan
    tomdan
    OP
    Aug 8, 2016
    3
    没有接触过 SparkSQL ,我的环境是 Hadoop 和 hive ,不确定有没有用到 spark ,现在的业务是将 hive 中的数据读到内存中后使用 redis 进行逻辑处理,这种情况适用吗?能否加一下 qq 请教一下?我的 1176925869 ,感激!!
    tomdan
    tomdan
    OP
    Aug 8, 2016
    4
    @inherited 没有接触过 SparkSQL ,我的环境是 Hadoop 和 hive ,不确定有没有用到 spark ,现在的业务是将 hive 中的数据读到内存中后使用 redis 进行逻辑处理,这种情况适用吗?能否加一下 qq 请教一下?我的 1176925869 ,感激!!
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Privacy   ·   Solana   ·   2227 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 27ms · UTC 14:10 · PVG 22:10 · LAX 06:10 · JFK 09:10
    ♥ Do have faith in what you're doing.