当前位置:   article > 正文

linux下安装spark三种模式_spark linux1 linux2 linux3

spark linux1 linux2 linux3

环境准备

    三台虚拟机:spark1,spark2,spark3

     三台虚拟机已经实现免密码登录


一、配置local单机模式(spark1中,解压即可用)

    1.上传至linux(以spark-1.6.1-bin-hadoop2.6.tgz为例)

    2.解压jar 包

        [root@spark1 soft]# tar -zxvf spark-1.6.1-bin-hadoop2.6.tgz

    3.测试

   [root@spark1 spark-1.6.1]# ./bin/spark-submit -class org.apache.spark.examples.SparkPi --master local[1] ./lib/spark-examples-1.6.1-hadoop2.6.0.jar 100

         其中SparkPi:指定运行程序(计算π的值)

声明:本文内容由网友自发贡献,不代表【wpsshop博客】立场,版权归原作者所有,本站不承担相应法律责任。如您发现有侵权的内容,请联系我们。转载请注明出处:https://www.wpsshop.cn/w/运维做开发/article/detail/766820
推荐阅读
相关标签
  

闽ICP备14008679号