阿里云ECS构建大数据平台实践-基于Apache Hadoop
0. 项目背景 基于阿里云ECS云服务器进行搭建私有的大数据平台,采用Apache Hadoop生态,为大数据提供存储及处理。 1. 购买ECS云服务器实例 在这里,因为实验需要3个节点,所以我们购买3台ECS实例。 2. 远程登录服务器,进行基础环境的配置。 # 工欲善其事,必先利其器 # 前提准备 # 安装系统命令 yum -y install wget vim ntpdate net-tools ntpdate 2.1 节点信息 172.18.53.98 master 172.18.53.99 slave1 172.18.53.100 slave2 2.2 修改主机名,每一个节点都需要修改。 2.3 配置主机文件(每一个节点都需要执行) vi /etc/hosts 172.18.53.98 master 172.18.53.99 slave1 172.18.53.100 slave2 2.4 系统防火墙和内核防火墙配置(每一个节点都需要执行) # 临时关闭内核防火墙 setenforce 0 # 永久关闭内核防火墙 vi /etc/selinux/config SELINUX=d...
