一、格式化文件系統(tǒng)
通過前面的學習,此時還不能直接啟動集群,因為在初次啟動HDFS集群時,編寫對主節(jié)點進行格式化處理,具體指令如下:
hdfs namenode -format(只需要在主節(jié)點運行即可或hadoop namenode -format)
執(zhí)行以上任意一條命令若出現(xiàn)“successfully formatted”文字表示格式化成功,然后就可以啟動集群了。
二、啟動和關閉Hadoop集群
1.單個節(jié)點逐個啟動和關閉
a.在主節(jié)點運行namenode進程
hadoop-daemon.sh start namenode
b.在每個從節(jié)點運行datanode進程
hadoop-daemon.sh start datanode
c.在主節(jié)點運行yarn resourcemanger進程
yarn-daemon.sh start resourcemanager
d.在每個從節(jié)點運行yarn nodemanger進程
yarn-daemon.sh start nodemanager
e.在規(guī)劃節(jié)點hadoop02使用以下指令啟動secondarynamenode進程
hadoop-daemon.sh start secondarynamenode
運行完成以上進程命令,如何判斷是否成功?需要jps命令查看當前虛擬機進程,hadoop01是四個進程hadoop02是三個進程hadoop03是兩個進程
2.腳本一鍵啟動和關閉
(1)在主節(jié)點hadoop01上使用以下指令啟動所有HDFS服務進程:
start-dfs.sh
(2)在主節(jié)點hadoop01上使用以下指令啟動所有YARN服務進程:
start-yarn.sh
如果需要停止相關服務進程,只需要將start改為stop即可(即stop-dfs.sh和stop-yarn.sh)
hadoop01 192.168.21.164
通過訪問以上IP+端口地址(50070 8088兩個端口)
http:192.168.21.164:50070http:192.168.21.164:8088
如果沒有關閉防火墻,可能導致無法訪問,則使用以下命令關閉防火墻:
systemctl stop firewalld(三臺機器都要關閉)
如果以主機名來訪問二大集群
http://hadoop01:50070http://hadoop01:8088
則必須配置宿主機hosts文件在C:\Windows\System32\drivers\etc填寫如下內(nèi)容:
192.168.21.164 hadoop01192.168.21.165 hadoop02192.168.21.166 hadoop03
-
集群
+關注
關注
0文章
88瀏覽量
17208 -
虛擬機
+關注
關注
1文章
937瀏覽量
28426 -
Hadoop
+關注
關注
1文章
90瀏覽量
16034
發(fā)布評論請先 登錄
相關推薦
什么是虛擬機?虛擬機真的那么好用嗎?
![什么是<b class='flag-5'>虛擬機</b>?<b class='flag-5'>虛擬機</b>真的那么好用嗎?](https://file.elecfans.com/web2/M00/43/7B/pYYBAGJ-B6aAHuNPAAAf8J1Ebk4778.jpg)
學hadoop需要什么基礎
Hadoop的集群環(huán)境部署說明
超詳細Dkhadoop虛擬機圖文安裝步驟
求一種基于集群的技術和基于虛擬機重啟的技術
如何搭建hadoop平臺_hadoop平臺搭建步驟
云環(huán)境下虛擬機集群系統(tǒng)動態(tài)負載均衡機制
你會用VMware虛擬機安裝Linux系統(tǒng)?
![你會用VMware<b class='flag-5'>虛擬機</b>安裝Linux系統(tǒng)?](https://file.elecfans.com/web1/M00/92/0A/pIYBAFzZP_yACvLZAAJRAw3g0zY458.png)
評論