• 请不要在回答技术问题时复制粘贴 AI 生成的内容
SlipStupig
V2EX  ›  程序员

关于 spark 持久化问题

  •  
  •   SlipStupig · Jul 18, 2016 · 2492 views
    This topic created in 3677 days ago, the information mentioned may be changed or developed.
    本人打算做一个比价软件打算用 spark 做 ETL 工具,想请教一下,如果用 spark 进行长期存储商品历史价格数据数据可靠吗?(会不会出现性能下降或数据丢失等情况?)
    2 replies    2016-07-18 10:43:37 +08:00
    vietor
        1
    vietor  
       Jul 18, 2016 via Android
    spark 只做运算不做存储。
    Todd_Leo
        2
    Todd_Leo  
       Jul 18, 2016
    可以存成 parquet file
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Solana   ·   3751 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 28ms · UTC 05:07 · PVG 13:07 · LAX 22:07 · JFK 01:07
    ♥ Do have faith in what you're doing.