热门标签
热门文章
- 1虚拟机配置（hadoop）前置准备_开启3台虚拟机, 配置主机名
- 2Python学习实验报告(1)_python实验报告
- 3Redis-在springboot环境下执行lua脚本
- 42023 英特尔On技术创新大会直播 | 边云协同加速 AI 解决方案商业化落地_英特尔张宇博士
- 5Android安卓App应用程序开发后如何运行到真机上？_安卓开发怎么在手机上演示
- 6西电计网ARP欺骗实验_win11 cain软件
- 7解决页面滚动条出现和消失的过程页面会横向移动的问题_css滚动条出现和消失页面动一下
- 8小白向攻略简单易懂，怎么用DomoAI将手机里面的视频转换成丝滑流畅高帧数的动画_domo ai
- 9轻松上手MYSQL：MYSQL事务隔离级别的奇幻之旅
- 10Python - 简易版计算器（附完整代码）_python计算器
当前位置: article > 正文
Linux虚拟机环境搭建spark_linux spark安装
作者：从前慢现在也慢 | 2024-06-28 18:15:10
赞
踩
linux spark安装
Linux环境搭建Spark分为两个版本，分别是Scala版本和Python版本。
一、 安装Pyspark
本环境以 Python 环境为例。
1、下载spark
下载网址：https://archive.apache.org/dist/spark
下载安装包：根据自己环境选择合适版本，本环境以spark3.0版本为案例。
- 根据hadoop版本下载下载 spark-3.0.0-bin-hadoop2.7.tgz / spark-3.0.0-bin-hadoop3.2.tgz
- 如果不依赖hadoop，则下载spark-3.0.0-bin-without-hadoop.tgz
- 只安装pyspark下载pyspark-3.0.0.tar.gz
个人推荐带有hadoop版本 如 spark-3.0.0-bin-hadoop3.2.tgz ，将来可以使用hadoop，也可以使用python环境。
2、上传spark安装包到目录
3、解压spark安装包并重命名
重命名主要是为了便于配置环境变量
推荐阅读
相关标签
