xiyangyang
V2EX  ›  Hadoop

创建一个基于 Spark 的生产平台,什么样的硬件配置是最普遍的

  •  
  •   xiyangyang · Mar 16, 2016 · 3522 views
    This topic created in 3783 days ago, the information mentioned may be changed or developed.

    每天数据量大约是 1000 万条,大部分是文本,需要快速查询出结果。
    spark 对内存要求比较高,业内普遍的服务器配置里面 CPU 和内存是怎么配置的?

    谢谢!

    2 replies    2016-03-17 07:59:35 +08:00
    knightdf
        1
    knightdf  
       Mar 16, 2016
    才 1000W 而已嘛,啥配置不行。。。
    ming2050
        2
    ming2050  
       Mar 17, 2016 via Android
    貌似数据量有点小
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Solana   ·   2837 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 25ms · UTC 12:09 · PVG 20:09 · LAX 05:09 · JFK 08:09
    ♥ Do have faith in what you're doing.