自拍偷在线精品自拍偷,亚洲欧美中文日韩v在线观看不卡

專家推薦 Hadoop0.20.2集群配置指導(dǎo)手冊

開發(fā) 架構(gòu) Hadoop
在學(xué)習(xí)Hadoop的過程中,你可能會遇到Hadoop0.20.2集群配置問題,這里就向大家簡單介紹一下Hadoop0.20.2集群配置的方法,希望本文的介紹對你有所幫助。

本節(jié)和大家一起繼續(xù)學(xué)習(xí)有關(guān)Hadoop0.20.2集群配置方面的內(nèi)容,上節(jié)我們介紹到Hadoop的配置,接下來該啟動Hadoop了。歡迎大家一起來學(xué)習(xí)Hadoop0.20.2集群配置的方法,相信通過本節(jié)的介紹大家對如何進(jìn)行Hadoop0.20.2集群配置有一定的認(rèn)識。

一、hadoop啟動

先格式化一個新的分布式文件系統(tǒng)
$cdhadoop-0.20.2
$bin/hadoopnamenode-format
查看輸出保證分布式文件系統(tǒng)格式化成功。
Hadoop0.20.2集群配置過程中在主節(jié)點(diǎn)master上面啟動hadoop,主節(jié)點(diǎn)會啟動所有從節(jié)點(diǎn)的hadoop。
$bin/start-all.sh
從主節(jié)點(diǎn)master關(guān)閉hadoop,主節(jié)點(diǎn)會關(guān)閉所有從節(jié)點(diǎn)的hadoop。
$bin/stop-all.sh
Hadoop守護(hù)進(jìn)程的日志寫入到${HADOOP_LOG_DIR}目錄(默認(rèn)是${HADOOP_HOME}/logs).

瀏覽NameNode和JobTracker的網(wǎng)絡(luò)接口,它們的地址默認(rèn)為:
NameNode-http://master:50070/
JobTracker-http://master:50030/

將輸入文件拷貝到分布式文件系統(tǒng):$bin/hadoopfs-putconfinput

運(yùn)行發(fā)行版提供的示例程序:$bin/hadoopjarhadoop-0.20.2-examples.jargrepinputoutput'dfs[a-z.]+'

查看輸出文件:
將輸出文件從分布式文件系統(tǒng)拷貝到本地文件系統(tǒng)查看:
$bin/hadoopfs-getoutputoutput
$catoutput/*
或者
在分布式文件系統(tǒng)上查看輸出文件:$bin/hadoopfs-catoutput/*


啟動運(yùn)行成功后,可以多熟悉熟悉hadoopdfs命令,例如:
hadoopdfs–ls查看/usr/root目錄下的內(nèi)容,默認(rèn)如果不填路徑這就是當(dāng)前用戶路徑;
hadoopdfs–rmrxxxxxx就是刪除目錄;
hadoopdfsadmin-report這個命令可以全局的查看DataNode的情況;
hadoopjob-list后面增加參數(shù)是對于當(dāng)前運(yùn)行的Job的操作,例如list,kill等;
hadoopbalancer均衡磁盤負(fù)載的命令。本節(jié)關(guān)于Hadoop0.20.2集群配置方面的內(nèi)容就介紹到這里。

【編輯推薦】

  1. Hadoop0.20.2集群配置入門指導(dǎo)手冊
  2. Hadoop集群配置全程跟蹤報(bào)道
  3. 專家講解 Hadoop:HBASE松散數(shù)據(jù)存儲設(shè)計(jì)
  4. 兩種模式運(yùn)行Hadoop分布式并行程序
  5. 輕松實(shí)現(xiàn)Hadoop Hdfs配置

 

責(zé)任編輯:佚名 來源: javaeye.com
相關(guān)推薦

2010-06-04 17:21:48

2010-06-07 15:48:40

Hadoop0.20.

2010-06-03 14:55:59

Hadoop配置

2012-09-18 09:55:44

Hadoop 2.0

2010-06-04 18:06:22

Hadoop集群搭建

2010-06-03 14:42:47

Hadoop分布式集群

2010-07-15 09:10:08

Perl函數(shù)手冊

2010-07-20 13:19:16

Perl入門手冊

2010-09-26 10:02:09

JVM優(yōu)化配置

2013-11-22 09:57:03

hadoop1.2.1zookeeper-3hbase-0.94.

2010-05-27 13:35:43

SVN簡易使用手冊

2009-12-22 11:14:38

WCF禁用安全配置

2010-07-23 12:23:49

Perl基礎(chǔ)

2010-06-07 18:12:39

mrtg 安裝

2010-05-20 09:41:07

MyEclipse下配

2010-05-19 14:28:18

Subversion權(quán)

2010-05-26 12:59:48

SVN簡易使用手冊

2010-07-26 11:09:35

Perl函數(shù)手冊

2010-09-27 10:54:53

JVM參數(shù)配置

2010-06-01 17:45:45

SVN 基本操作
點(diǎn)贊
收藏

51CTO技術(shù)棧公眾號