• 请不要在回答技术问题时复制粘贴 AI 生成的内容
twogoods
V2EX  ›  程序员

spark 的开发环境应该是怎样的?

  •  
  •   twogoods · Mar 13, 2017 · 1745 views
    This topic created in 3372 days ago, the information mentioned may be changed or developed.

    在看 spark 的 mlib 包,用的是 Java 语言,发现把包导入后本地机器直接 run 就可以跑出结果,看日志感觉是每次都启动 spark 进程, helloworld 级别的跑一次也要好几秒,这里是不是 spark 的启动花了不少时间?想问问你们一般是怎么开发调试的

    2 replies    2017-03-13 15:49:40 +08:00
    mind3x
        1
    mind3x  
       Mar 13, 2017 via Android
    用 Scala ,小东西直接在 spark-shell 下面试
    qfdk
        2
    qfdk  
    PRO
       Mar 13, 2017 via iPhone
    @mind3x 一楼真理了
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Solana   ·   2877 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 29ms · UTC 13:08 · PVG 21:08 · LAX 06:08 · JFK 09:08
    ♥ Do have faith in what you're doing.