环境准备（阿里云）

1.购买阿里云ESC服务器

2.配置实例

　　修改密码 —— 重启实例

3.基础配置

　　基于SecureCRTPortable.exe进行远程操作
　　　　1.新建账号密码
　　　　　　useradd liaomj
　　　　　　passwd liaomj
　　　　　　在/etc/sudoers中添加 liaomj    ALL=(ALL)       ALL

　　　　2.配置hosts文件

　　　　3.修改主机名 /etc/sysconfig/network

　　基于WinSCP.exe进行主机和服务器的文件传输

4.配置JDK环境变量

.bash_profile

export JAVA_HOME=/home/liaomj/app/jdk1.8.0_131
export PATH=$JAVA_HOME/bin:$PATH

5.搭建hadoop

https://hadoop.apache.org/docs/stable/hadoop-project-dist/hadoop-common/SingleCluster.html#Standalone_Operation

6.搭建Zookeeper

http://zookeeper.apache.org/doc/current/zookeeperStarted.html

7.搭建logstash

作用：日志采集

https://www.elastic.co/guide/en/logstash/2.4/installing-logstash.html

etc/hadoop/core-site.xml:

<configuration>
    <property>
        <name>fs.defaultFS</name>
        <value>hdfs://localhost:9000</value>
    </property>
</configuration>

环境准备（阿里云）

原文：https://www.cnblogs.com/liaomj/p/12410064.html