centOS中安装hadoop伪分布式（二）

承接上一篇文章centOS中安装hadoop伪分布式（一），继续配置hadoop。

已经配置完成的镜像文件（virtualBox适用），下载地址http://pan.baidu.com/s/1o7H3CKi

一、安装hadoop

（1）将hadoop解压到目录/usr/bigdata/hadoop

（2）配置hadoop环境变量

使用文本编辑工具vi或gedit打开 /etc/profile文件，追加环境变量。

export HADOOP_HOME=/usr/bigdata/hadoop/hadoop-2.6.4/
export PATH=$PATH:$HADOOP_HOME/bin
export HADOOP_COMMON_LIB_NATIVE_DIR=$HADOOP_HOME/lib/native
export HADOOP_OPTS="-Djava.library.path=$HADOOP_HOME/lib"

重新加载文件，使环境变量生效

. /etc/profile

二、伪分布式配置

（1）配置core-site.xml

打开/usr/bigdata/hadoop/hadoop-2.6.4/etc/hadoop/core-site.xml，追加如下内容

<configuration>
<property>
  <name>hadoop.tmp.dir</name>
  <value>file:/usr/bigdata/hadoop/hadoop-2.6.4/</value>
</property>
<property>
  <name>fs.defaultFS</name>
  <value>hdfs://localhost:9000</value>
</property>
</configuration>

 
    （2）配置hdfs-site.xml 
   

 
    打开/usr/bigdata/hadoop/hadoop-2.6.4/etc/hadoop/hdfs-site.xml，追加如下内容 
   

<configuration>
<property>
  <name>dfs.replication</name>
  <value>1</value>
</property>
<property>
  <name>dfs.namenode.name.dir</name>
  <value>file:/usr/bigdata/hadoop/hadoop-2.6.4/tmp/dfs/name</value>
</property>
<property>
  <name>dfs.datanode.data.dir</name>
  <value>file:/usr/bigdata/hadoop/hadoop-2.6.4/tmp/dfs/data</value>
</property>

（3）格式化hdfs

 
    命令行中，定位到 
    /usr/bigdata/hadoop/hadoop-2.6.4/bin目录下，执行如下命令

hadoop namenode -format

（4）启动hdfs

命令行中，定位到/usr/bigdata/hadoop/hadoop-2.6.4/sbin目录下，执行如下命令
  
   

. /start-dfs.sh

（5）验证是否启动成功，执行命令jps，查看namenode、datanode、secondNamenode 是否成功启动。

（6）启动web管理界面
  
   

浏览器输入http://localhost:50070，结果如图所示 
   

centOS中安装hadoop伪分布式（二）

一、安装hadoop

二、伪分布式配置

猜你在找的CentOS相关文章