学习笔记之分布式hadoop，分布式的hadoop是大数据的基础。所有的组件的搭建都建立在分布式hadoop上。后期的高可用和动态的删除节点和增加节点都需要使用到。
如果分布式的hadoop搭建成功，则会开启以下服务
master namenode datanode nodemanager jps
slave1 datanode nodemanager jps secondarynamenode
slave2 datanode nodemanager jps resourcemanager
tar -zxf hadoop-2.6.0.tar.gz -C /usr/local/src/ mv hadoop-2.6.0.tar.gz hadoop
vi /etc/profile
export HADOOP_HOME=/usr/local/src/hadoop export PATH=$PATH:$HADOOP_HOME/bin:$HADOOP_HOME/sbin
source /etc/profile
cd /usr/local/src/hadoop/etc/hadoop
修改6个文件：hadoop-env.sh;core-env.xml;hdfs-env.xml;mapreduce-site.xml;yarn-site.xml;slaves
其中mapreduce-site.xml 并不存在，但是有mapreduce-site.xml.template,所以要重命名。
修改export JAVA_HOME=${JAVA_HOME}为
export JAVA_HOME=/usr/loca/src/jdk
<property>
<name>fs.defaultFS</name>
<value>hdfs://master:9000</value>
</property>
<property>
<name>hadoop.tmp.dir</name>
<value>/zhy/hadoop/hdfs/tmp</value>
</property>
<property>
<name>dfs.namenode.name.dir</name>
<value>/usr/local/src/hadoop/hdfs/name</value>
</property>
<property>
<name>dfs.datanode.data.dir</name>
<value>/usr/local/src/hadoop/hdfs/data</value>
</property>
<property>
<name>dfs.repliation</name>
<value>2</value>
</property>
<property>
<name>dfs.secondary.http.address</name>
<value>slave1:50090</value>
</property>
<property>
<name>mapreduce.framework.name</name>
<value>yarn</value>
</property>
<property>
<name>yarn.resourcemanager.host</name>
<value>slave3</value>
</property>
<property>
<name>yarn.resourcemanager.address</name>
<value>slave3:8032</value>
</property>
<property>
<name>yarn.nodemanager.aux-services</name>
<value>mapreduce_shuffle</value>
</property>
master
slave1
slave2
hadoop namenode -format 或者 hdfs namenode -format
start-dfs.sh start-yarn.sh #在yarn上启动
输入jps查看hadoop启动的服务
原文：https://www.cnblogs.com/txxj/p/11918040.html