hadoop指标项

2018-08-19 1463

hadoop采集metrics接口

转至元数据结尾转至元数据起始

系统采用的,hadoop采集metrics接口-每分钟

namenode

http://%s:50070/jmx?qry=Hadoop:service=NameNode,name=FSNamesystemState

http://%s:50070/jmx?qry=Hadoop:service=NameNode,name=NameNodeActivity

http://%s:50070/jmx?qry=Hadoop:service=NameNode,name=JvmMetrics

http://%s:50070/jmx?qry=Hadoop:service=NameNode,name=RpcDetailedActivityForPort8020

http://%s:50070/jmx?qry=Hadoop:service=NameNode,name=FSNamesystem

http://%s:50070/jmx?qry=Hadoop:service=NameNode,name=RpcActivityForPort8020

http://%s:50070/jmx?qry=Hadoop:service=NameNode,name=RpcActivityForPort8020

http://%s:50070/jmx?qry=Hadoop:service=NameNode,name=RpcDetailedActivityForPort8022

http://%s:50070/jmx?qry=Hadoop:service=NameNode,name=RpcActivityForPort8020

http://%s:50070/jmx?qry=Hadoop:service=NameNode,name=RpcActivityForPort80222

hmaster

ht tp://%s:60010/jmx?qry=hadoop:service=Master,name=MasterStatistics

http://%s:60010/jmx?qry=hadoop:service=HBase,name=RPCStatistics-60000

Regionserver

ht tp://127.0.0.1:60030/jmx?qry=hadoop:service=RegionServer,name=RegionServerDynamicStatistics

ht tp://127.0.0.1:60030/jmx?qry=hadoop:service=RegionServer,name=RegionServerStatistics

ht tp://127.0.0.1:60030/jmx?qry=hadoop:service=HBase,name=RPCStatistics-60020

datanode

http://%s:50075/jmx?qry=Hadoop:service=DataNode,name=DataNodeActivity-%s-%s

http://%s:50075/jmx?qry=Hadoop:service=DataNode,name=JvmMetrics

http://%s:50075/jmx?qry=Hadoop:service=DataNode,name=RpcActivityForPort%s

http://%s:50075/jmx?qry=Hadoop:service=DataNode,name=FSDatasetState-%s

resourcemanager

http://%s:8088/jmx?qry=Hadoop:service=ResourceManager,name=ClusterMetrics

http://%s:8088/jmx?qry=Hadoop:service=ResourceManager,name=JvmMetrics

http://%s:8088/jmx?qry=Hadoop:service=ResourceManager,name=QueueMetrics,q0=root

http://%s:8088/jmx?qry=Hadoop:service=ResourceManager,name=RpcDetailedActivityForPort8030

http://%s:8088/jmx?qry=Hadoop:service=ResourceManager,name=RpcDetailedActivityForPort8031

http://%s:8088/jmx?qry=Hadoop:service=ResourceManager,name=RpcDetailedActivityForPort8032

http://%s:8088/jmx?qry=Hadoop:service=ResourceManager,name=RpcDetailedActivityForPort8033

http://%s:8088/jmx?qry=java.lang:type=GarbageCollector,name=ConcurrentMarkSweep

http://%s:8088/jmx?qry=Hadoop:service=ResourceManager,name=FSOpDurations

http://%s:8088/ws/v1/cluster/appstatistics

ht tp://%s:8088/jmx?qry=Hadoop:service=ResourceManager,name=EventMetrics

nodemanager

http://127.0.0.1:8042/jmx?qry=Hadoop:service=NodeManager,name=JvmMetrics

http://127.0.0.1:8042/jmx?qry=Hadoop:service=NodeManager,name=NodeManagerMetrics

http://127.0.0.1:8042/jmx?qry=Hadoop:service=NodeManager,name=RpcActivityForPort8040

http://127.0.0.1:8042/jmx?qry=Hadoop:service=NodeManager,name=RpcActivityForPort8041

http://127.0.0.1:8042/jmx?qry=Hadoop:service=NodeManager,name=ShuffleMetrics

journalnode

http://127.0.0.1:8480/jmx?qry=Hadoop:service=JournalNode,name=JournalNodeInfo

http://127.0.0.1:8480/jmx?qry=Hadoop:service=JournalNode,name=JvmMetrics

http://127.0.0.1:8480/jmx?qry=Hadoop:service=JournalNode,name=RpcDetailedActivityForPort8485

ht tp://127.0.0.1:8480/jmx?qry=Hadoop:service=JournalNode,name=Journal-yiran-data-ns

上一篇下一篇

优秀的个人博客,低调大师

微信关注我们

原文链接：https://yq.aliyun.com/articles/626452

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

如何进行MaxCompute 用户认证？

您可以通过以下两种方式进行用户认证。检查请求Request发送者的真实身份即请求发送后，参数包括用户名和密码，服务端会验证用户名和密码是否正确，以此判断Request发送者的身份是否可信。使用此方法有可能在请求时间较长的情况下，受到黑客攻击，导致密码泄露。使用消息签名机制通过（AccessID、请求时间、请求参数）+签名的方式，根据AccessID获取userID、key等信息服务，验证提交端和服务端是否一致，MaxCompute也是通过此方式进行验证。验证过程中，根据消息签名算法HMAC-SHA1来保证消息在传输过程中的完整性（Integrity）和真实性（Authenticity）。通过身份验证后，需要控制请求来源—IP白名单。 IP白名单作用于整个项目空间，它的格式有以下三种：设置IP：如101.132.236.134 设置子网

2018-08-20

673

赢取9月杭州云栖大会单日免费票—快来参加大数据计算直播就对了

大数据计算技术共享计划 — MaxCompute 技术公开课第二季经典课程《自建Hadoop数据如何托管到MaxCompute》将于8月21日，18:30分在“MaxCompute开发者交流”钉钉群进行直播。欢迎搜索钉钉群号11782920，或扫描下方二维码加入钉钉群参与直播。直播结束后，将对参与本次直播的“MaxCompute开发者交流”钉钉群的群友们抽奖送出：杭州云栖大会9月19日单日免费门票一张（现官网9月19日单日门票已售罄了哦~）限量版青花瓷套装一份阿里巴巴计算平台定制版淘公仔10个除奖品外，更能长期与群内大数据技术牛人，各种大咖实时交流，大数据之路从此不再孤独~~ 快来参加直播，就对了！大数据计算技术共享计划 — MaxCompute 技术公开课第二季全部课程请戳>>> 第三季内容火热筹备中，将于9月第

2018-08-21

662

相关文章

发表评论

资源下载

更多资源

优质分享App

近一个月的开发和优化，本站点的第一个app全新上线。该app采用极致压缩，本体才4.36MB。系统里面做了大量数据访问、缓存优化。方便用户在手机上查看文章。后续会推出HarmonyOS的适配版本。

Mario

马里奥是站在游戏界顶峰的超人气多面角色。马里奥靠吃蘑菇成长，特征是大鼻子、头戴帽子、身穿背带裤，还留着胡子。与他的双胞胎兄弟路易基一起，长年担任任天堂的招牌角色。

Spring

Spring框架（Spring Framework）是由Rod Johnson于2002年提出的开源Java企业级应用框架，旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念，提供核心容器、应用上下文、数据访问集成等模块，支持整合Hibernate、Struts等第三方框架，其适用范围不仅限于服务器端开发，绝大多数Java应用均可从中受益。

Rocky Linux

Rocky Linux（中文名：洛基）是由Gregory Kurtzer于2020年12月发起的企业级Linux发行版，作为CentOS稳定版停止维护后与RHEL（Red Hat Enterprise Linux）完全兼容的开源替代方案，由社区拥有并管理，支持x86_64、aarch64等架构。其通过重新编译RHEL源代码提供长期稳定性，采用模块化包装和SELinux安全架构，默认包含GNOME桌面环境及XFS文件系统，支持十年生命周期更新。