CSDN■不看就亏系列！这里有完整的 Hadoop 集群搭建教程，和最易懂的 Hadoop 概念！| 附代码( 八 )

Your public key has been saved in /home/hadoop/.ssh/id_rsa.pub. The key fingerprint is: cf:4f:4e:5e:8a:4f:7e:86:e9:f6:8c:8f:77:b9:69:50 hadoop@chenc01.localdomain The key's randomart image is: +--[ RSA 2048]----+ | | | | | | | E | | S . | | o . | | o +oo .| | X+*+oo| | .+@*=+.| ++ [hadoop@ chenc01 dfs]$ ssh-copy-id chenc02 [hadoop@ chenc01 dfs]$ ssh-copy-id chenc01 # 对自己也做一次 [hadoop@ chenc01 dfs]$ ssh-copy-id chenc03备注：方便后期复制文件或者启动服务。因为namenode启动时候，会链接到datanode上启动对应的服务。

启动hdfs

[hadoop@ chenc01 dfs]$ /home/hadoop/hadoop-3.1.3/etc/hadoop

报错：2020-03-04 16:16:45,394 WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platform… using builtin-java classes where applicable

解答：http://dl.bintray.com/sequenceiq/sequenceiq-bin/ 下载对应版本 解压，覆盖hadoop下/lib/native/ 上传之后解压： [hadoop@ chenc01 ~]$ cd hadoop-3.1.3/lib/native/ [hadoop@ chenc01 native]$ ls examples libhadoop.so libhdfs.a libnativetask.a libhadoop.a libhadoop.so.1.0.0 libhdfs.so libnativetask.so libhadooppipes.a libhadooputils.a libhdfs.so.0.0.0 libnativetask.so.1.0.0 [hadoop@ chenc01 native]$ rz [hadoop@ chenc01 native]$ tar xf hadoop-native-64.tar examples libhadoop.so.1.0.0 libnativetask.a hadoop-native-64.tar libhadooputils.a libnativetask.so libhadoop.a libhdfs.a libnativetask.so.1.0.0 libhadooppipes.a libhdfs.so libhadoop.so libhdfs.so.0.0.0 覆盖完之后重启
关闭之后在启动
[hadoop@ chenc01 ~]$ cd /home/hadoop/hadoop-3.1.3/etc/hadoop/ [hadoop@ chenc01 hadoop]$ ../../sbin/stop-dfs.sh

启动yarn

也就是说我们要启动分布式计算
[hadoop@ chenc01 hadoop]$ ../../sbin/start-yarn.sh [hadoop@ chenc01 hadoop]$ ../../sbin/start-all.sh

启动jobhistory

[hadoop@ chenc01 hadoop]$ ../../sbin/mr-jobhistory-daemon.sh start historyserver

Web查看集群状态

本文插图
【CSDN■不看就亏系列！这里有完整的 Hadoop 集群搭建教程，和最易懂的 Hadoop 概念！| 附代码】如果本文对你有帮助，请点右下角“在看”告诉我们！
【End】《原力计划【第二季】- 学习力挑战》正式开始！即日起至 3月21日，千万流量支持原创作者，更有专属【勋章】等你来挑战推荐阅读你点的每一个在看，我认真当成了喜欢