| |
|
|
开发:
C++知识库
Java知识库
JavaScript
Python
PHP知识库
人工智能
区块链
大数据
移动开发
嵌入式
开发工具
数据结构与算法
开发测试
游戏开发
网络协议
系统运维
教程: HTML教程 CSS教程 JavaScript教程 Go语言教程 JQuery教程 VUE教程 VUE3教程 Bootstrap教程 SQL数据库教程 C语言教程 C++教程 Java教程 Python教程 Python3教程 C#教程 数码: 电脑 笔记本 显卡 显示器 固态硬盘 硬盘 耳机 手机 iphone vivo oppo 小米 华为 单反 装机 图拉丁 |
| -> 大数据 -> Linux 系统搭载spark开发环境 -> 正文阅读 |
|
|
[大数据]Linux 系统搭载spark开发环境 |
|
解压spark安装包 ????????首先将spark-2.4.0-bin-without-hadoop.tgz 上传到hadoop01的/export/software/目录下,然后解压至?/export/servers/
? ? ? ? 为方便后续操作,使用命令将Spark的目录重新命名为spark,命令如下:
?修改配置文件 ????????1)进入spark/conf目录修改Spark的配置文件spark-env.sh,将spark-env.sh.template配置模板文件复制一份并命名为spark-env.sh,具体命令如下。
? ? ? ? ?2)复制slaves.template文件,并重命名为slaves,通过vi命令添加以下内容具体命令如下:
分发文件
?启动Spark集群 在/export/servers/spark目录下执行命令开启,命令如下:
?
?访问https://hadoop01:8080;来查看集群状态
|
|
|
|
|
| 上一篇文章 下一篇文章 查看所有文章 |
|
|
开发:
C++知识库
Java知识库
JavaScript
Python
PHP知识库
人工智能
区块链
大数据
移动开发
嵌入式
开发工具
数据结构与算法
开发测试
游戏开发
网络协议
系统运维
教程: HTML教程 CSS教程 JavaScript教程 Go语言教程 JQuery教程 VUE教程 VUE3教程 Bootstrap教程 SQL数据库教程 C语言教程 C++教程 Java教程 Python教程 Python3教程 C#教程 数码: 电脑 笔记本 显卡 显示器 固态硬盘 硬盘 耳机 手机 iphone vivo oppo 小米 华为 单反 装机 图拉丁 |
| 360图书馆 购物 三丰科技 阅读网 日历 万年历 2025年11日历 | -2025/11/22 20:30:13- |
|
| 网站联系: qq:121756557 email:121756557@qq.com IT数码 |