搭建企业级大数据平台Cloudera Manager + CDH 5.8 + CentOS7
【本文转载自:www.bigdata-star.com】 前言 在搭建CM之前。。本人也是纯人工的把hadoop生态圈常用组件自己集成了一遍。。途中遇到各种坑,比如版本不匹配导致的一系列问题。。但自己尝试一下是好的!因为手把手的纯命令行的搭建可以让你更了解它们!但是到了企业中是不可能这样滴,因为有诸多的劣势,试问如果一个集群有1000个节点,你怎么去人工搭?如果要全部升级,你又怎么人工处理?还有前面说的,版本不匹配问题各种坑。所以还是要用图形化的,管理性强的工具,比如CM。 Cloudera Manager功能 CM功能强大,主要表现在几个方面: 集群管理:比如添加节点,删除节点 配置管理:之前我们手工配置的那些配置文件比如core-site.xml,hdfs-site.xml,zoo.cfg等等,我们都可以通过图形化界面来配置。 日志管理:之前我们发现bug了,跑不起来了,得手工去看日志,比如,现在通通可以在CM上查看了! 监控:实时监控集群的各种运行状态,cpu,磁盘等的使用率 诊断:对集群出现的问题进行诊断,对出现的问题给出建议解决方案。 整合Hadoop生态圈中的组件:直接一键...