使用hadoop restful api实现对集群信息的统计
（适用于hadoop 2.7及以上版本）
涉及到RESTful API
- ResourceManager REST API’s：
https://hadoop.apache.org/docs/stable/hadoop-yarn/hadoop-yarn-site/ResourceManagerRest.html - WebHDFS REST API：
https://hadoop.apache.org/docs/stable/hadoop-project-dist/hadoop-hdfs/WebHDFS.html - MapReduce History Server REST API’s：
https://hadoop.apache.org/docs/stable/hadoop-mapreduce-client/hadoop-mapreduce-clie
关注公众号 低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。
持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。
转载内容版权归作者及来源网站所有，本站原创内容转载请注明来源。
- 上一篇
Pinot —— LinkedIn 开源 OLAP 存储和分析系统
Pinot 是一个实时分布式的 OLAP 数据存储和分析系统。LinkedIn 使用它实现低延迟可伸缩的实时分析。Pinot 从离线数据源（包括 Hadoop 和各类文件）和在线数据源（如 Kafka）中攫取数据进行分析。Pinot 被设计是可以进行水平扩展的。 https://yqfile.alicdn.com/286f264b08e6b282ff971e94e9f881e3c2ccdacb.png" > 文章转载自 开源中国社区 [http://www.oschina.net]
- 下一篇
《Hadoop金融大数据分析》读书笔记
《Hadoop金融大数据分析》 Hadoop for Finance Essentials使用Hadoop，是因为数据量大数据量如此之多，以至于无法用传统的数据处理工具和应用来处理的数据称主大数据3V定义：即“大量Volume,多样Variety,高速Velocity是与大数据相关的三个属性或维度。大量指的是数据的量很大，多样指的是数据的类型很多，高速指的是数据处理的速度很快对于一家处理GB级数据的小公司来说，TB级的数据可能被认为是大数据，对于处理TB级数据的大公司来说，PB级的数据，则被认为是大数据就常规而言，大数据至少是TB级的 除了想要存储无尽的数据，企业也需要分析它们 数据以不同的形式存储，其中大量的交易数据被称为结构化数据，图像和音频等数据被称为非结构化数据 ETL：提取Extract，转换Transform，加载Load现在的企业需要处理异构型数据，从Excel表格，数据库到纯文本、图片、视频、网络数据、GPS数据、传感器数据、文本数据、移动信息数据、甚至包括可以扫描和转换成电子格式的文件
相关文章
文章评论
共有0条评论来说两句吧...
文章二维码
点击排行
推荐阅读
最新文章
- MySQL8.0.19开启GTID主从同步CentOS8
- SpringBoot2编写第一个Controller，响应你的http请求并返回结果
- CentOS6,CentOS7官方镜像安装Oracle11G
- SpringBoot2配置默认Tomcat设置，开启更多高级功能
- CentOS6,7,8上安装Nginx，支持https2.0的开启
- Hadoop3单机部署,实现最简伪集群
- CentOS关闭SELinux安全模块
- CentOS7设置SWAP分区，小内存服务器的救世主
- Docker快速安装Oracle11G，搭建oracle11g学习环境
- CentOS7,8上快速安装Gitea，搭建Git服务器
微信收款码
支付宝收款码