Hadoop3.x进阶之HDFS

作者：Cpp五条 | 2024-06-15 05:11:26

踩

Hadoop3.x进阶之HDFS

版本3.1.3

集群测试（wordcount）

首先集群中创建目录(也可以直接执行-put它会自动帮你创建目录)

 hadoop fs -mkdir /input

然后添加文件到目录中

hadoop fs -put word.txt /input

可以在HDFS的WEB上查看上传的文件是否成功

http://hadoop102:9870/explorer.html#/

执行wordcount的jar包参数为input路径和output路径

hadoop jar share/hadoop/mapreduce/hadoop-mapreduce-examples-3.1.3.jar wordcount /input /output

执行后可在103服务器上的ResourceManager WEB上查看进度

http://hadoop103:8088/cluster

最后可以在HDFS的WEB上查看结果，路径为命令执行的第二个参数/output

声明：本文内容由网友自发贡献，不代表【wpsshop博客】立场，版权归原作者所有，本站不承担相应法律责任。如您发现有侵权的内容，请联系我们。转载请注明出处：https://www.wpsshop.cn/w/Cpp五条/article/detail/721013