yarn划分队列示例-低调大师

yarn划分队列示例

2017-11-06 648

修改Yarn服务的配置，修改Capacity Scheduler配置项如下：

修改部分：
yarn.scheduler.capacity.root.default.capacity=60
yarn.scheduler.capacity.root.default.maximum-capacity=60
yarn.scheduler.capacity.root.queues=default,dev

新增部分：
yarn.scheduler.capacity.root.dev.capacity=40
yarn.scheduler.capacity.root.dev.maximum-capacity=40
yarn.scheduler.capacity.root.dev.state=RUNNING
yarn.scheduler.capacity.queue-mappings=u:etl:dev,u:ETL:dev,u:gotop:dev,u:hive:default,g:hadoop:dev,g:hdfs:dev
yarn.scheduler.capacity.queue-mappings-override.enable=true
yarn.scheduler.capacity.root.dev.acl_administer_jobs=
yarn.scheduler.capacity.root.dev.acl_submit_applications=

本文转自 yntmdr 51CTO博客，原文链接：http://blog.51cto.com/yntmdr/2049794，如需转载请自行联系原作者

微信关注我们

原文链接：https://yq.aliyun.com/articles/509985

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

elasticsearch 集群

搭建elasticsearch的集群现在假设我们有3台es机器，想要把他们搭建成为一个集群基本配置每个节点都要进行这样的配置： cluster.name: baichebao-cluster 这个是配置集群的名字，为了能进行自动查找 node.name: "baichebao-node-1" 这个是配置当前节点的名字，当然每个节点的名字都应该是唯一的 node.master: false node.data: true 这两个配置有4种配置方法，表示这个节点是否可以充当主节点，这个节点是否充当数据节点。如果你的节点数目只有两个的话，为了防止脑裂的情况，需要手动设置主节点和数据节点。其他情况建议直接不设置，默认两个都为true. network.host: "0.0.0.0" 绑定host，0.0.0.0代表所有IP，为了安全考虑，建议设置为内网IP transport.tcp.port: 10800 节点到节点之间的交互是使用tcp的，这个设置设置启用的端口 http.port: 9700 这个是对外提供http服务的端口，安全考虑，建议修改，不用默认的9200 discove...

2017-11-07

584

Eucalyptus云技术专题（专题二） Amazon云计算开源实现之Eucalyptus —— 主流开源云系统PK 随着云计算的发展，开源云系统也层出不穷。其中，有对商业云计算系统的模仿实现，如Eucalyptus来源于Amazon的EC2和S3的模仿，Hadoop来源于Google商业云模仿，也有根据特定需要设计与开发的云计算系统，如Nimbus是面向科学计算的开源云，SectorandSphere是面向密集型数据应用的开源云。还有面向存储的Cassandra、VoltDB、MongoDB等等，可谓是百花争艳，各领风骚。 Eucalyptus Logo来自于官网 Eucalyptus来源于AmazonEC2的开源实现，并有类似AmazonS3存储系统的Walrus。Eucalyptus采用模块化设计，其组件可以替换和升级，允许云计算爱好者对云计算系统的安全性、扩展性、资源调度、接口实现等进行测试，为进行云计算研究提供了一个不错的平台，目前，Eucalyptus除有开源版本外，还拥有了功能更为完善的商业版。目前最新版本为 Eucalyptus3.2.2 。 Hadoop Lo...

2017-11-07

743

资源下载

更多资源

优质分享App

近一个月的开发和优化，本站点的第一个app全新上线。该app采用极致压缩，本体才4.36MB。系统里面做了大量数据访问、缓存优化。方便用户在手机上查看文章。后续会推出HarmonyOS的适配版本。

腾讯云软件源

为解决软件依赖安装时官方源访问速度慢的问题，腾讯云为一些软件搭建了缓存服务。您可以通过使用腾讯云软件源站来提升依赖包的安装速度。为了方便用户自由搭建服务架构，目前腾讯云软件源站支持公网访问和内网访问。

Nacos

Nacos /nɑ:kəʊs/ 是 Dynamic Naming and Configuration Service 的首字母简称，一个易于构建 AI Agent 应用的动态服务发现、配置管理和AI智能体管理平台。Nacos 致力于帮助您发现、配置和管理微服务及AI智能体应用。Nacos 提供了一组简单易用的特性集，帮助您快速实现动态服务发现、服务配置、服务元数据、流量管理。Nacos 帮助您更敏捷和容易地构建、交付和管理微服务平台。

Rocky Linux

Rocky Linux（中文名：洛基）是由Gregory Kurtzer于2020年12月发起的企业级Linux发行版，作为CentOS稳定版停止维护后与RHEL（Red Hat Enterprise Linux）完全兼容的开源替代方案，由社区拥有并管理，支持x86_64、aarch64等架构。其通过重新编译RHEL源代码提供长期稳定性，采用模块化包装和SELinux安全架构，默认包含GNOME桌面环境及XFS文件系统，支持十年生命周期更新。