Hadoop伪分布式安装步骤

Hadoop伪分布式安装步骤

  1. JDK安装
    解压:# tar -zxvf jdk-7u79-linux-x64.tar.gz -C ~/app
    添加到系统环境变量:
    # vim ~/.bash_profile
    # export JAVA_HOME=/home/hadoop/app/jdk1.7.0_79
    # export PATH=$JAVA_HOME/bin:$PATH
    使得环境变量生效:# source ~/.bash_profile
    验证java是否配置成功: # java -version

  2. 安装ssh

    # sudo yum install ssh
    # ssh-keygen -t rsa
    # cp ~/.ssh/id_rsa.pub ~/.ssh/authorized_keys

  3. 下载并解压hadoop
    下载:直接去cdh官方网站下载
    解压:tar -zxvf hadoop-2.6.0-cdh5.7.0.tar.gz -C ~/app

  1. hadoop配置文件的修改(hadoop_home/etc/hadoop)
    修改 hadoop-env.sh
    export JAVA_HOME=/home/hadoop/app/jdk1.7.0_79

修改 core-site.xml

1
2
3
4
5
6
7
8
9
<property>
<name>fs.defaultFS</name>
<value>hdfs://hadoop000:8020</value>
</property>

<property>
<name>hadoop.tmp.dir</name>
<value>/home/hadoop/app/tmp</value>
</property>
1
2
3
4
5
hdfs-site.xml
<property>
<name>dfs.replication</name>
<value>1</value>
</property>
  1. 启动hdfs

格式化文件系统(仅第一次执行即可,不要重复执行):hdfs namenode -format
启动hdfs:sbin/start-dfs.sh
验证是否启动成功:

  1. jps
    三个进程
    DataNode
    SecondaryNameNode
    NameNode
  2. 浏览器访问方式: http://hadoop000:50070

  3. 停止hdfs

sbin/stop-dfs.sh

-------------End Of This ArticleThank You For Reading-------------