搜索
查看
编辑修改
首页
UNITY
NODEJS
PYTHON
AI
GIT
PHP
GO
CEF3
JAVA
HTML
CSS
搜索
菜鸟追梦旅行
这个屌丝很懒,什么也没留下!
关注作者
热门标签
jquery
HTML
CSS
PHP
ASP
PYTHON
GO
AI
C
C++
C#
PHOTOSHOP
UNITY
iOS
android
vue
xml
爬虫
SEO
LINUX
WINDOWS
JAVA
MFC
CEF3
CAD
NODEJS
GIT
Pyppeteer
article
热门文章
1
uni-app跨平台开发学习心得_uni-app跨平台开发与应用从入门到实践dcloud百度网盘pdf下载
2
SAP假脱机打印解决方法_sap打印不出来假脱机请求
3
Attention-Based Convolutional Neural Network for Semantic Relation Extraction
4
每日一题 --- 反转链表[力扣][Go]
5
qml-stacklayout_qml stacklayout
6
M1/M2 Pro VMware Fusion虚拟机安装Win11教程(超详细)_vmware m1
7
深度学习-常用激活函数详细介绍_深度学习激活函数详解
8
MySQL之ACID实现原理
9
全球最大的3D数据集公开了!标记好的10800张全景图_线全景图像数据集
10
ae绘图未指定错误怎么办_CAD绘图技巧180例
当前位置:
article
> 正文
CenterOS6.5mini版 hadoop集群搭建_center os mini
作者:菜鸟追梦旅行 | 2024-04-02 15:12:52
赞
踩
center os mini
CentOS6.5mini版hadoop集群搭建流程
桌面版无须安装 ssh
CentOS 7 系列:
重启网络服务:systemctl restart network
关闭防火墙:systemctl stop firewalld
禁止防火墙开机启动:systemctl disable firewalld
安装虚拟机的时候需要配置好主机名和网络
主机名:master,slave1,slave2
网络配置:
1. 自动连接
2. ipv4 手动
------------------ 三个都要执行的操作
-2.验证网络配置是否正确:ifconfig
如果有错修改 /etc/sysconfig/network-scripts/ifcfg-eth0 文件
然后重启网络服务:service network restart
-1.验证主机名是否正确:hostname
master,slave1,slave2
如果有错修改 /etc/sysconfig/network 文件
修改完 source /etc/sysconfig/network 刷新下,不生效就重启试试
0. 安装 ssh 服务
yum -y install openssh-server 安装 ssh 服务器
yum -y install openssh-clients 安装 ssh 客户端
1. 分别关闭防火墙
service iptables stop
2. 分别禁止防火墙开机启动
chkconfig iptables off
3. 分别配置 /etc/hosts 文件,增加一下内容
192.168.37.101 master
192.168.37.102 slave1
192.168.37.103 slave2
4. 分别执行 ssh-keygen 生成公钥和私钥
5. 分别执行 ssh-copy-id master /root/.ssh/id_rsa.pub 把公钥发送给 master
----------------- master 执行的操作
6. master 执行 cat /root/.ssh/authorized_keys 检查是否收集到了所有的公钥
7. master 执行命令把 authorized_keys 发送给 slave1 和 slave2
scp /root/.ssh/authorized_keys root@slave1:/root/.ssh/
scp /root/.ssh/authorized_keys root@slave2:/root/.ssh/
------------------ 三个都要执行的操作
8. 分别执行,共 9 次
ssh master exit
ssh slave1 exit
ssh slave2 exit
消除第一次登录的 yes
------------------ 以下操作都在 master 上进行
9. 上传 jdk 到 master 的 /opt/SoftWare 文件夹
10.解压 jdk tar -xvf jdk
11.配置 jdk 环境变量 vi /etc/profile
在文件最后追加一下内容:
export JAVA_HOME=/opt/SoftWare/jdk1.8.0_151
export JRE_HOME=/opt/SoftWare/jdk1.8.0_151/jre
export CLASSPATH=.:
声明:
本文内容由网友自发贡献,不代表【wpsshop博客】立场,版权归原作者所有,本站不承担相应法律责任。如您发现有侵权的内容,请联系我们。转载请注明出处:
https://www.wpsshop.cn/w/菜鸟追梦旅行/article/detail/352780
推荐阅读
article
【HarmonyOS4.0】第九篇-
ArkUI
布局
容器组件(一)_
column
(
alignitems
...
沿垂直方向
布局
的容器。: {space?value:可选参数,space表示设置Column参数名参数类型必填参数描述s...
赞
踩
article
【
hadoop
】本地
E
c
lipse
编写
hadoop
词统计代码本地测试,打包上传
服务器
测试_使用e
c
l...
环境准备1、
服务器
配置好
hadoop
2.7.3,详细配置过程可参考
hadoop
2.7.3环境配置2、本地安装好E
c
li...
赞
踩
article
hadoop
学习:
mapreduce
入门案例一:
WordCount
统计
一个文本中单词
的
个数_w...
这个案例
的
需求很简单现在这里有一个文本
word
count.
txt
,内容如下现要求你使用
mapreduce
框架
统计
每个...
赞
踩
article
hadoop
的
wordcount
程序_
public
class
wordcount
mapper
...
配置本地windows 可以参考本人博客1.启动配置输入参数: D:\input D:\output注意:输入输出是一个...
赞
踩
article
【云
计算
与大
数据
计算
】
Hadoop
MapReduce
实战之统计
每个
单词
出现次数、
单词
平均
长度
、Gr...
【云
计算
与大
数据
计算
】
Hadoop
MapReduce
实战之统计
每个
单词
出现次数、
单词
平均
长度
、
Grep
(附源码 )_w...
赞
踩
article
彷徨 |
MapReduce
实例四 |
统计
每个
单词
在每个
文件
里出现的次数_.如下
文件
的
文件
内容,统...
示例:一个目录下有多个
文件
,每个
文件
里有相同的
单词
,
统计
每个
单词
在每个
文件
里出现的次数即同一个
单词
在不同
文件
下的词频
统计
...
赞
踩
article
改善
神经网络
——优化算法(
mini
-
batch
、动量
梯度
下降
法、
Adam
优化算法)_动量
梯度
下降
优化...
在进行参数更新的时候,让y轴方向上的
梯度
(在随机
梯度
下降
法中,从某一点开始,我们重新选取一个起始点,每次迭代,你只对一个...
赞
踩
article
【
Hadoop
】创建
Hadoop
集群(3个
节点
)—— 安装部署
一个
3个
节点
构成的
hbase
集群_
配置
...
互联网的快速发展带来了数据快速增加,海量数据的存储已经不是一
台
机器所能处理的问题了。
Hadoop
的技术应运而生,对于伪分...
赞
踩
article
Hadoop
完全
分布式
部署...
Hadoop
完全
分布式
部署 ,环境:CentOS 7 、jdk1.8 、hadoop 3.3.4
Hadoop
完全分布...
赞
踩
article
深入理解
Hadoop
上的
Hive
查询
执行
流程...
在
Hadoop
生态系统中,
Hive
是一个重要的分支,它构建在
Hadoop
之上,提供了一个开源的数据仓库系统。它...
赞
踩
article
Hadoop
+
Spark
大
数据
技术
第三次
作业...
Hadoop
+
Spark
大
数据
技术
第三次
作业
Hadoop
+
Spark
大
数据
技术
第三次
作业 ...
赞
踩
article
hadoop
高
可用
(HA)、
HDFS
HA、
Yarn
HA...
目录
hadoop
高
可用
(HA)、
HDFS
HA、
Yarn
HA 目录
hadoop
高
可用
(...
赞
踩
article
大
数据
----
Hadoop
----
Spark
入门介绍_
spark
/
hadoop
/
graphx
...
Hadoop
生态圈包含多种组件,貌似各不相同,但是都有三种共同的特征:1.依赖于
Hadoop
的YARN、HDFS、Map...
赞
踩
article
Mini
-
Gemini
:
Mini
ng the Potential of
Multi
-modalit...
在这项工作中,我们介绍了
Mini
-
Gemini
,这是一个简单而有效的框架,用于增强多模态视觉语言模型(VLMs)。尽管V...
赞
踩
article
Centos7.6+
Hadoop
3.1
.
2
(
HA
)+Zookeeper3.
4
.13+Hbase1....
1、前言1.1、什么是
Hadoop
?1.1.1、什么是 YARN?1.
2
、什么是 Zookeeper?1.3、什么是 ...
赞
踩
article
Hadoop
在
CenterOS
配置_
hadoop
center
...
转自 实验楼1.
Hadoop
介绍1.1
Hadoop
简介Apache
Hadoop
软件库是一个框架,允许在集群服务器上使用...
赞
踩
article
Hadoop
分布式部署_
mkvmerge
hadoop
...
环境介绍Linux版本:CenterOS 7.2
Hadoop
版本:
hadoop
-2.6.0-cdh5.15.1Java版...
赞
踩
article
Hadoop
、
Hbase
、
Hive
版本兼容性_
hadoop
3.3
.4 兼容
hive
...
装Spark的时候想当然的装了
Hadoop
的最新版 2.6.x结果后面再安装HBase和
Hive
的时候 遇到了 彼此无法...
赞
踩
article
Hadoop
概述
、
Hadoop
发展历史
、
Hadoop
三
大
发行版本
、
Hadoop
优势
、
Hadoo...
高可靠性
、
高扩展性
、
高效性
、
高容错性YARN
架构
概述
、
MapReduce
架构
概述
、
HDFS
、
YARN
、
MapReduce...
赞
踩
article
Hadoop
1.1
.2
分布式
安装
过程 (
vmware
10
+centeros5.4 64位+had...
Hadoop
1.1
.2
分布式
安装
过程 (
vmware
10
+centeros5.464位+hadoop
1.1
.2+ se...
赞
踩
相关标签
harmonyos
typescript
前端
网络
鸿蒙
鸿蒙系统
华为
hadoop
学习
mapreduce
大数据
云计算
分布式
MapReduce
实例
词频统计
神经网络
算法
batch
hdfs
hive