自拍偷在线精品自拍偷,亚洲欧美中文日韩v在线观看不卡

Hadoop 2.x HDFS和YARN的啟動方式

大數(shù)據(jù) Hadoop
以下是Hadoop 2.x HDFS和YARN的啟動方式希望能對同學們有所幫助。

[[193364]]

一.三種啟動方式介紹

方式一:逐一啟動(實際生產(chǎn)環(huán)境中的啟動方式)

  1. hadoop-daemon.sh start|stop namenode|datanode| journalnode 
  2. yarn-daemon.sh start |stop resourcemanager|nodemanager 

方式二:分開啟動

  1. start-dfs.sh 
  2. start-yarn.sh 

方式三:一起啟動

  1. start-all.sh 

二.腳本解讀

start-dfs.sh腳本:

(1) 通過命令bin/hdfs getconf –namenodes查看namenode在那些節(jié)點上

(2) 通過ssh方式登錄到遠程主機,啟動hadoop-deamons.sh腳本

(3) hadoop-deamon.sh腳本啟動slaves.sh腳本

(4) slaves.sh腳本啟動hadoop-deamon.sh腳本,再逐一啟動

start-all.sh腳本:

說明:start-all.sh實際上是調(diào)用sbin/start-dfs.sh腳本和sbin/start-yarn.sh腳本

三.三種啟動方式的關系

start-all.sh其實調(diào)用start-dfs.sh和start-yarn.sh

start-dfs.sh調(diào)用hadoop-deamon.sh

start-yarn.sh調(diào)用yarn-deamon.sh

如下圖:

四.為什么要設置ssh協(xié)議

當執(zhí)行start-dfs.sh腳本時,會調(diào)用slaves.sh腳本,通過ssh協(xié)議無密碼登陸到其他節(jié)點去啟動進程。

為了能自動啟動遠程節(jié)點的進程,需要進行免密碼登錄。

五.采用第二種啟動方式

上面已經(jīng)配置好了ssh公鑰登錄,接下來用第二種啟動方式啟動

Step1:先停止所以進程(如果已經(jīng)啟動)

  1. [hadoop@hadoop-yarn hadoop-2.2.0]$sbin/yarn-daemon.sh stop nodemanager 
  2. [hadoop@hadoop-yarn hadoop-2.2.0]$sbin/yarn-daemon.sh stop resourcemanager  
  3. [hadoop@hadoop-yarn hadoop-2.2.0]$sbin/hadoop-daemon.sh stop datanode 
  4. [hadoop@hadoop-yarn hadoop-2.2.0]$sbin/hadoop-daemon.sh stop secondarynamenode 
  5. [hadoop@hadoop-yarn hadoop-2.2.0]$sbin/hadoop-daemon.sh stop namenode 

Step2:啟動所以進程

  1. [hadoop@hadoop-yarn hadoop-2.2.0]$sbin/start-dfs.sh 
  2. [hadoop@hadoop-yarn hadoop-2.2.0]$ sbin/start-yarn.sh 

Step3:查看管理界面

YARN: http://hadoop-yarn.dragon.org:8088/

HDFS: http://hadoop-yarn.dragon.org:50070/

責任編輯:武曉燕 來源: oschina博客
相關推薦

2017-08-03 10:38:32

HADOOP1.XHDFSHadoop

2022-02-22 08:30:12

Husky代碼工作流

2010-06-07 13:35:16

Hadoop簡介

2012-07-11 17:21:23

HadoopHDFS

2021-03-04 10:11:50

MongoDBSpring BootSpring Boot

2022-03-18 09:00:00

開發(fā)Web服務應用程序

2010-07-05 09:50:29

PythonPython 2.7

2014-02-14 15:30:18

HadoopYARN

2021-12-31 08:48:23

Logback日志管理

2017-10-24 15:11:39

Python 2.x 3.x

2010-06-03 15:39:47

Hadoop配置

2020-08-19 17:56:46

緩存Redis集中式

2017-10-24 13:02:29

2015-04-16 14:24:56

Hadoop云計算HDFS

2013-04-23 11:17:47

Hadoop

2013-03-08 10:09:30

Hadoop

2010-06-03 15:13:34

Hadoop Hdfs

2019-03-21 11:03:47

HDFSMapReduceHadoop

2015-09-14 10:18:37

2017-04-17 10:05:51

Hadoop錯誤方式
點贊
收藏

51CTO技術棧公眾號