偷偷摘套内射激情视频,久久精品99国产国产精,中文字幕无线乱码人妻,中文在线中文a,性爽19p

Hadoop配置和啟動Hadoop方法詳解

開發(fā) 架構(gòu) Hadoop
Hadoop相信大家應該有所了解,那么如何進行Hadoop配置,如何啟動Hadoop呢,本文會給你一一解答,歡迎大家一起來學習。

本節(jié)和大家學習一下如何進行Hadoop配置與啟動Hadoop方面的知識,相信通過本節(jié)的介紹大家對Hadoop配置和啟動Hadoop方法有一定的認識,希望本節(jié)的介紹對你的學習有所幫助。

Hadoop配置與啟動Hadoop

Hadoop三種模式:

StandaloneOperation:只有一個Java虛擬機在跑,完全沒有分布式的成分。
Pseudo-DistributedOperation:在同一臺機器上啟動獨立數(shù)個JVM進程,進行“分布式”操作。
Fully-DistributedOperation:真正的可以運行于多臺機器上的分布式模式。(我們按這種方式進行配置)

環(huán)境:

***臺:win7+cygwin
第二臺:虛擬機CentOS.5.3

實現(xiàn)目標:

cygwin作為master,部署上NameNode+JobTracker,IP:192.168.220.1
CentOS作為slaver,部署上DataNode+TaskTracker,IP:192.168.14.128

Hadoop配置準備工作:

1.免密碼SSH登錄,cygwin=》CentOS,見:http://efeil.blog.163.com/blog/static/1189022972010210544494/
2.兩個系統(tǒng)Hosts配置相同,為:192.168.220.1hadoop-master
192.168.14.128hadoophadoop-slave01

3.Hadoop配置中conf/core-site.xml配置
<configuration>
<!---globalproperties-->
<property>
<name>hadoop.tmp.dir</name>
<!--這是Cygwin下配置,CentOS下為/tmp/hdfs-gaoyanfei-->
<value>e:/tmp/hdfs-gaoyanfei</value>
<description>Abaseforothertemporarydirectories.</description>
</property>
<!--filesystemproperties-->
<property>
<name>fs.default.name</name>
<value>hdfs://hadoop-master:9000</value>
</property>
</configuration>


4.Hadoop配置中conf/hdfs-site.xml配置:
<?xmlversion="1.0"?>
<?xml-stylesheettype="text/xsl"href="configuration.xsl"?>

<!--Putsite-specificpropertyoverridesinthisfile.-->
<configuration>
<property>
<name>dfs.replication</name>
<value>1</value>
</property>
</configuration>


5.Hadoop配置中conf/mapred-site.xml配置:
<?xmlversion="1.0"?>
<?xml-stylesheettype="text/xsl"href="configuration.xsl"?>
<!--Putsite-specificpropertyoverridesinthisfile.-->
<configuration>
<property>
<name>mapred.job.tracker</name>
<value>hadoop-master:9001</value>
</property>
</configuration>


6.masters配置內(nèi)容:hadoop-master
7.slaves配置內(nèi)容:hadoop-slave01

8.在Cygwin下啟動:
1.bin/hadoopnamenode-format
2.bin/start-all.sh。本節(jié)關(guān)于Hadoop配置與啟動Hadoop介紹到這里

【編輯推薦】

  1. 輕松實現(xiàn)Hadoop Hdfs配置
  2. 專家指導 如何進行Hadoop分布式集群配置
  3. Hadoop配置指導手冊
  4. HadoopHBase實現(xiàn)配置簡單的單機環(huán)境
  5. 深入剖析Hadoop HBase

 

 

責任編輯:佚名 來源: it168.com
相關(guān)推薦

2010-06-03 19:16:23

Hadoop

2010-06-03 17:38:03

Hadoop命令

2014-08-06 09:57:15

hadoop ShelShell命令

2010-06-04 09:43:47

hadoop應用

2010-06-04 16:47:49

實現(xiàn)Hadoop

2010-06-03 11:12:55

Hadoop

2010-06-03 14:55:59

Hadoop配置

2012-06-25 10:30:06

Hadoop集群

2013-05-30 09:07:29

Hadoop 2.0

2010-06-04 17:43:12

Hadoop集群搭建

2010-06-07 15:07:24

nutch+hadoo

2010-06-03 10:51:09

Hadoop安裝部署

2010-06-04 11:00:27

hadoop性能優(yōu)化

2013-01-21 13:22:56

IBMdW

2015-07-29 10:36:05

hadoop數(shù)據(jù)挖掘

2017-03-22 20:21:16

Hadoop框架分布式

2010-06-03 17:08:28

Hadoop Shel

2021-06-09 17:51:12

Hadoop數(shù)據(jù)遷移

2010-06-03 15:13:34

Hadoop Hdfs

2013-11-28 09:44:00

點贊
收藏

51CTO技術(shù)棧公眾號