当前位置:   article > 正文

【hadoop安装配置向】:厦门大学林子雨老师博客_林子雨hadoop

林子雨hadoop

# 本科课程内容要求 本文不介绍原理,操作向!

# 默认已经完成虚拟机的安装和配置,作者自用ubuntu22版

# hadoop安装与配置,首先建议各位完成几件事:

1.确保虚拟机内存足够大,否则出现大文件解压缩或者失误操作会造成虚拟机内存占用率达到100%,可能需要通过扩充磁盘或者重新下载配置虚拟机(重开)!

2.在虚拟机内完成网页版微信登陆,用于大文件传输!

3.如果有条件建议配置好虚拟机与主机的复制粘贴设置,以便后续使用(作者没有配置明白,所以不强求这点)

4.将终端收藏到左侧,方便随时打开运行。

# 进入正题林子雨老师原文博客: 很详细,但是大概率会出现别的问题,,林子雨老师并没有详细给出,但作者走了很多弯路,需要的自行点击借鉴

https://dblab.xmu.edu.cn/blog/4193/

||创建hadoop用户

此处内容大概率不会出现问题,借鉴林老师操作即可,

【温馨提示】不要输入错路径和命令,希望各位同学可以自己在firefox浏览器中浏览林老师博客,方便粘贴代码

终端输入命令时要注意自己的虚拟机电脑路径有一个是“下载”或“download",输入命令自行代换

创建好用户后切换用户到"hadoop" 进行下一步

||更新apt

没遇到林老师的问题,但遇到了其他问题

记得是关于update之后报错,大致意思是有几个连接不上,【由于我用的是清华大学镜像源,需要将清华大学镜像源给出的需要添加的内容加入到配置中

很简单,粘贴即可!

需要注意的是vim命令,本作者不建议用vim,利用vim命令进行亦可!

建议将命令中的"vim"替换成"gedit",更改其中内容后保存!!(作者和林老师亲测好用)

||安装SSH、配置SSH无密码登陆

注意路径!!!!!注意路径!!!!!注意路径!!!!!

||安装Java环境

/usr/lib/jvm在如图内容

||安装 Hadoop3.3.5

此处利用主机百度网盘下载借助主机微信登录文件传输助手虚拟机内firefox浏览器的网页版微信,实现文件的互传快速下载,接下来按照林老师的命令持续执行各个命令

注意输入命令的到底应该是"下载"或"download"

||Hadoop单机配置(非分布式)

无其他问题,小心输入即可

||Hadoop伪分布式配置

小心输入!

 测试时需要同时出现datanode和namenode

||运行Hadoop伪分布式实例

自行测试进行就好,其本质是建立删除,不影响后续操作!

声明:本文内容由网友自发贡献,不代表【wpsshop博客】立场,版权归原作者所有,本站不承担相应法律责任。如您发现有侵权的内容,请联系我们。转载请注明出处:https://www.wpsshop.cn/w/喵喵爱编程/article/detail/911838
推荐阅读
相关标签
  

闽ICP备14008679号